Die Vorfahren der Familie kam vor ca. 400 Jahren mit den Deutschordens Ritter von Italien (so zwischen Rom und Mailand) über Österreich nach Kempten. In Österreich teilte sich wohl die Sippe da ein Teil des Clans in das heutige Tschechien, in die Gegend um Prag, weiter wanderte, ein anderer Teil in Österreich blieb und der Rest nach Deutschland (Kempten) weiter wanderte. Hier finden sich in den Pfarrbüchern der damaligen Zeit, zwei Familien mit dem Namen "Rommler" die einen schrieben sich mit zwei "mm", die anderen mit einem Strich über dem Buchstaben "m". Dies war gleich bedeutent  mit dem doppelten Buchstaben. Im der Lauf der Zeit wurde wohl irgend wann der Strich vergessen und bis heute nicht ergänzt. Die Familie "Romler" siedelte immer in der Nähe von Burgen und Schlössern in Baden Württemberg. Um 1860 wanderte ein Romler nach Amerika aus. Heute findet man in Amerika, Australien und Neuseeland den Namen "Romler" mit einem "m" wieder.