Eiscreme erreichte das Weiße Haus durch Europäer, als Mitglieder königlicher Familien im 18. Eiscreme erschien im Weißen Haus neben dem ersten Präsidenten, George Washington. Es gewann jedoch an Popularität beim vierten Präsidenten James Madison und seiner Frau Dolly, die eine Affinität zu Eiscreme hatten.
Obwohl Eiscreme heute ein beliebter Leckerbissen bei Amerikanern aller sozioökonomischen Schichten war, war sie früher teuer und relativ selten, was sie zu einem Dessert für wohlhabende Bürger machte. In Europa erreichte Eiscreme in seiner modernen Form erst im 17. Jahrhundert die Massen, als es in Italien auftauchte. Im 18. Jahrhundert erfreuten sich jedoch Eiscreme und andere gefrorene Neuheiten wie Eis und Sorbet unter europäischen Aristokraten großer Beliebtheit. Der gefrorene Leckerbissen fand Anfang des 18. Jahrhunderts seinen Weg in die Vereinigten Staaten und die erste Eisdiele wurde 1790 eröffnet. Das Weiße Haus und viele Anwesen verfügten sogar über hauseigene Eismaschinen.
In der Kolonialzeit gab es Eis in verschiedenen Geschmacksrichtungen. Einige, wie Spargel, Parmesan und Austerneis, waren bei Familien des Weißen Hauses, einschließlich der Madisons, beliebt, fanden aber nie eine breite Akzeptanz. Andere, wie Vanilleeis, sind nach wie vor sehr beliebt, ebenso wie Toppings wie Beeren und Sahne.