Die ursprüngliche Farbe des Weißen Hauses war Weiß. Laut der White House Historical Association wurden die Wände 1798 nach ihrer Fertigstellung weiß getüncht, damit der Stein im Winter nicht einfriert.
Die Wände des Weißen Hauses wurden zwei Jahre vor dem Einzug von Präsident John Adams und seiner Frau Abigail als erste Bewohner im Jahr 1800 weiß getüncht. Einer oft erzählten, aber irrigen Geschichte zufolge wurde das Weiße Haus 1814 weiß gestrichen , nachdem es während des Krieges von 1812 von den Briten niedergebrannt wurde. Obwohl es Beweise dafür gibt, dass das Haus des Präsidenten bereits 1812 das Weiße Haus genannt wurde, machte Theodore Roosevelt den Namen im September 1901 offiziell.