16. yüzyılda ortaya çıktığı sanılan ve asırlarca Anadolu’da dilden dile anlatılan,“Kerem ile Aslı” hikâyesinin bu bahçede geçtiği söylenir.Kerem,Ağrı Dağı’nı aşarak buraya gelir ve Aslı ile burada buluşur.Hikâye ayrı dinlerden oldukları için evlenemeyen iki gencin,acı sonla biten aşklarını anlatır. İsfahan padişahının oğlu Kerem’in,Keşiş'in kızı Aslı’ya gönlünü kaptırdığı yerin,Keşiş'in Bahçesi olduğu söylenir.
Günümüzde Keşiş Bahçesi,açık hava kafeteryası olarak hizmet vermektedir...