IV. Mehmed döneminde, 1653'te hanedanın diğer erkek üyeleri Topkapı Sara­yı'nda, Harem'e bitişik “şimşirlik” denilen yerde hapsedil diler.

Sultanın kardeşleri Şehzade Süleyman, Şehzade Ahmed ve Şehzade Selim şimşirliğin ilk misafiriydiler. Bir adı da “kafes” olan bina 12 odadan meydana geliyordu. Binada Şehzadeler için hamamlar vardı. Yüksek duvarlarla ve şimşir ağaçlarıyla çevriliydi. “Şehzadegân Dairesi” olarak yaptırılan bina adını çevresindeki ağaçlardan almıştı. Binanın çift taraflı demirlerle kilitlenen iki kapısı vardı. Kapıların hem önünde hem de arkasında siyahi hadım ağalar nöbet tutarlardı.

Şimşirlik binasını 1756'da gören Fransız tüccar Jean Claude Flachat, binanın sağlam bir kaleye benzediğini ve kasvetli bir görüntüsünün olduğunu söyler.