Padişahların divan toplantılarını dinledikleri Adalet Kasrı Fatih Sultan Mehmed döneminde bağımsız kule şeklinde bir bina olarak yapılmıştı. Osmanlı Devleti’nin adaleti her şeyin üzerinde tuttuğunu ifade eden sembolik bir anlamı vardır. Adalet Kulesi Sultan II. Mahmud döneminde (1819-20) yıllarında tadil edilerek yükseltilmiştir. Daha sonra, 19 yy.da Sultan Abdülaziz döneminde bugünkü yüksek ve sivri külahlı görünümünü kazanmıştır. 2007 yılında Kültür Bakanlığı tarafından restorasyonu yapılmıştır.