در سال 1791، اولین رئیسجمهور آمریکا محل ساخت و طرح نهایی کاخ سفید را تأیید کرد. در سیزده اکتبر 1792، ساختمان پیریزی شد و تعدادی از فراماسونها ساختوساز را آغاز کردند.