Bir parça ya da bloğun sürekli ve tekrar tekrar kullanılması ile tüm bir binanın ortaya çıkarılması demek olan modüler mimarinin ilk örnekleri, eski Yunanlılar zamanında denendi. Bu yöntemi, lego oynamaya benzer aslında.

Eski Yunanlılardan sonra, modüler mimari, Orta Çağ’da Gotik mimarlar tarafından yeniden gündeme getirildi. Bu tarzda, birçok katedral yapıldı. Ana yapı unsurları olan bu katedraller, özel dekoratif unsurlarla birbirlerinden ayrıldılar.

18. yüzyılda külçe demirin yoğun üretimi başlayınca, modüler mimari, prefabrik inşaat yöntemine de yansıdı. Bu yöntem, maliyetlerin de büyük ölçüde ucuzlamasına neden oldu.

Modüler mimari ile prefabrik inşaat sisteminin ilk ürünü, 1851 yılında Londra'da verildi ve "Crystal Palace" inşa edildi. Planlanması ve yapılması yalnızca dokuz ay sürdü. Başka bir yöntemle, bu denli büyük bir binanın yapımı ancak seneler içinde mümkün olabilirdi.

Modüllerin biçimini Devonshire Dükü Joseph Paxton çizdi ve daha sonra bunlar yoğun biçimde üretildi. Çok kısa bir sürede tamamlanan modül üretiminden sonra montaj aşaması başladı ve bina 1851 büyük sergisine yetiştirildi.