En raison de son emplacement donnant directement sur le Nil, le Sérail Nazli a été transformé en une caserne de l’armée égyptienne sous le règne du gouverneur Mohammed Saïd. L’armée britannique s’en est emparée après l’occupation en 1882 et l’a transformé en caserne de l’armée britannique, jusqu’à ce qu’elle soit restaurée et le drapeau égyptien soit hissé dessus dans les années 1940. Il a été démoli dans les années 1950 et se trouve à sa place actuellement la Ligue des Etats arabes.