งานชิ้นนี้เริ่มสร้างตั้งแต่ปี พ.ศ. 2425 มีกำหนดก่อสร้างหอคอยทั้งหมด 18 หอคอย นับตั้งแต่ปีเริ่มสร้างจนถึงปัจจุบันสร้างเสร็จไปแล้วแค่ 8 หอคอย งานคืบหน้าไปประมาณร้อยละ 50 สถาปนิกผู้ออกแบบถูกรถรางทับเสียชีวิตไปเมื่อ พ.ศ. 2469 โดยศพของเขาได้ถูกฝังไว้ในซากราดาฟามีเลียด้วย
แม้เกาดีจะเสียชีวิตไปแล้ว แต่ผู้ร่วมงานของเขายังคงสานต่อโครงการโดยอาศัยรูปถ่าย ภาพร่าง และแบบจำลองที่เกาดีทำไว้แต่แล้วในปี พ.ศ. 2479 โครงการก็ต้องหยุดชะงักเพราะสงครามกลางเมืองในสเปนห้องใต้ดินและแบบจำลองอย่างละเอียดก็ถูกเผาทำลาย แต่เมื่อสิ้นสุดสงครามทีมงานก็กลับมาทำงานกันต่อ โดยอาศัยภาพร่าง ภาพถ่ายและแบบจำลองอื่น ๆ ที่รอดพ้นจากการถูกทำลาย ภายหลังได้นำคอมพิวเตอร์มาใช้ออกแบบ แต่ถึงจะใช้เทคโนโลยีมากมายมาช่วย กว่าโครงการนี้จะเสร็จก็อีกยาวไกลถึงปี พ.ศ. 2569
ลักษณะเด่นของอาคารแห่งนี้จะสังเกตได้ถึงสีที่ตัดกันของหินด้านหน้าและด้านหลังอย่างชัดเจน และพบรูปแบบการก่อสร้างที่แตกต่างกันระหว่างแบบเก่าและแบบที่สร้างต่อขึ้นไหม่ในปัจจุบัน