Здание расположено на уединенной территории посреди Президентского парка в центре г. Вашингтона (округ Колумбия, США). На этом участке улица закрыта для транспорта. Белый особняк с колоннами является лишь центральной частью большого комплекса построек, в который входят западное и восточное крылья (большие флигели, соединенные с главным корпусом галереями), а также расположено отдельно административное здание Д. Эйзенхауэра.
В 1790 г. был принят федеральный закон об определении временной и постоянной резиденции правительства США. Для постоянной резиденции выбран берег г. Потомак в специально созданном федеральном округе Колумбия. Весной 1791 г. место для президентского дома избрал первый Президент США Дж. Вашингтон вместе с архитектором П. Ш. Ланфаном (1754–1825 гг.; Франция-США), автором распланировки г. Вашингтона.
Строительство Белого дома длилось в 1792–1800 гг. и стоило 232 371 долларов 83 цента. Фасады были оштукатурены и побелены, откуда и происходит неофициальное название здания.
01.11.1800 Дж. К. Адамс стал первым президентом, резиденцией которого стал Белый дом. 24.08.1814 здание сгорело в результате пожара в Вашингтоне, который совершило британское войско во время англо-американской войны 1812–1815 гг. Здание Белого дома было отстроено в 1815–1817 гг.
Главный корпус (Представительская резиденция) – четырехэтажный, сооруженный на двухэтажном подвале. В подвалах находятся хозяйственно-складские помещения, бомбоубежище. На цокольном этаже – библиотека, офисы, кухня с хозяйственными помещениями. Бельэтаж (так называемый государственный этаж) содержит представительские помещения, предназначенные для проведения государственных мероприятий.
Третий и четвертый этажи являются частными, предназначенными для президента и его семьи. Четвертый, аттиковый этаж, снаружи почти не виден, поскольку его по периметру дома закрывает высокий парапет с балюстрадой.
В плане дом прямоугольный, симметричный. На северном фасаде по центру – четырехколонный портик ионического ордера с треугольным фронтоном. На южном фасаде по центру – полуротонда с террасой и балконом, окруженная колоннадой ионического ордера (за ней закрепилось не совсем корректное название «южный портик»). Такого же ордера пилястры, которым декорированы все фасады.
Белый дом с 1960 года имеет статус национального исторического памятника.
В 2007 году Белый Дом признан вторым по значению (после небоскреба Эмпайр Стейт Билдинг в г. Нью-Йорке) выдающимся зданием США. Одно из знаковых построек американского классицизма, которое вместе со зданием Конгресса США (см. Капитолий в Вашингтоне) определило архитектурную стилистику застройки г. Вашингтона.