Ortaköy Cami ve Boğaz Köprüsü’nün hemen yanında bulunan bu yalının geçmişi 18. yüzyıla dayanıyor. İsmini 1. Abdülhamit’in kızı Esma Sultan’dan alan yalı, 1915 yılında Osmanlı saray hanedanının mülkiyetinden çıktı.
1918’de Rum okulu, 1922’den itibaren ise tütün deposu olarak kullanıldı. 1950’li yıllarda marangozhane ve depo gibi işlevler gören Esma Sultan Yalısı, 1975 yılında büyük bir yangın geçirdi ve harap oldu.
1990’lı yılların başında otel grubu The Marmara tarafından satın alınan yalı, orijinal planına sadık kalınarak düzenlendi ve 2001 yılından itibaren hizmete açıldı.