Eltmann gedieh unter der Pfandherrschaft der Amtsverwalter auf der Wallburg so weit, dass es 1335, am Dienstage nach Obersten (= Drei Könige), also am 10. Januar 1335, auf Vorschlag des Bischofs Hermann II. durch Kaiser Ludwig dem Bayern (1314-1347) die Stadtrechte verliehen bekam und damit weitere Bedeutung im Obermaingebiet gewann. Durch die Verleihung der Stadtrechte erhielt Eltmann das Recht, ein eigenes Stadtwappen zu führen.
Als um 640 zum Schutz gegen die in die Maingegend vordringenden Slawen ein fränkisch-thüringisches Herzogtum gegründet wurde, gewann das Castell Altimoin als wichtiger Grenzstützpunkt am Obermain große Bedeutung. bereits für das 8. Jahrhundert wurde es als fränkisches „castellum munitissimum“ (bedeutet: sehr gut befestigtes Castell) beschrieben. Demnach musste das frühe „Altimoin“ 100 Familien mit ihren Wohnungen bzw. Bauernhöfen umschließen.
Weitere Sehenswürdigkeiten in Eltmann sind zum Beispiel die Ölbergkapelle, die Kreuzkapelle, die Stadtpfarrkirche, die Wallburg oder der Wallburgturm. Auch für Wanderungen ist der angrenzende Steigerwald hervorragend geeignet.
