Es wird angenommen, dass Jimmies nach Jimmy Bartholomew benannt sind, einem Mann, der für die Firma Just Born arbeitete, in der Eiscremestreusel erfunden wurden. Von Zeit zu Zeit kursiert eine urbane Legende, dass der Name des Belags eine Abkürzung für Jim Crow ist und sich auf braune Eiscremestreusel bezieht.
Die meisten stimmen darin überein, dass jimmies der Name für alle Eiscremestreusel ist, unabhängig von der Farbe. Der Name wird häufig für Eiscremestreusel in der Region Neuengland der Vereinigten Staaten verwendet, insbesondere in Boston.
Jimmy Bartholomew war der Mann, der 1930 an der Maschine arbeitete, die die Streusel herstellte. Einige Slang-Wörterbücher haben jedoch die Verwendung von Jimmies bis in die 1920er Jahre zurückverfolgt, bevor Bartholomew Angestellter bei Just Born wurde.