Başlangıçta Bağdat sarayın ve caminin çevresinde, aralarında evlerin bulunduğu bir dizi duvarıyla daire şeklinde bir kasaba olarak düzenlenmişti. Zenginliğini kısmen sarayın varlığından alarak nüfusu çığ gibi büyüdü ve dış mahalleler merkezden dışa doğru yayıldı. Zirvesinde olduğu dönemde Konstantinopolis'ten 5 misli büyük bir alanı kaplıyordu ve nüfusu 900.000 kadardı.