Köşk, Rumeli Hisarı'nda farklı mimarisiyle dikkat çekiyor. 1900'lü yıllarda Mısır Valisi Abbas Hilmi Paşa’nın Başyaveri olan Yusuf Ziya Paşa, 1910’ların başında köşkün inşasına başlar. Ancak, köşkün yapımı sırasında 1. Dünya Savaşı başlar. Köşkün inşaatında çalışanlar ise askere alınır. Bu sebeple yapımı bir süre durur. Yusuf Ziya Paşa'nın hayatını kaybettiği 1926'ya kadar ikinci eşi olan Nebiye Hanım ve onun ilk eşinden 3 kızıyla beraber bu köşkte yaşadığı söyleniyor. Yusuf Ziya Paşa'nın ölümünden sonra da aile 1993 yılına kadar köşkte kalmaya devam eder. İlk katında da kiracılar yaşar. Köşkün  'Perili Köşk' olarak anılmasının sebebi de işçilerin savaşa gitmek zorunda kaldıkları için bitiremediği köşkün, iki ve üçüncü katlarının boş kalması.