Erlbach, am Südhang des Jura gelegen, wurde erstmals am 25. Juni 1314 in einer Urkunde des Eichstätter Bischofs Philipp von Rathsamhausen genannt. Weitere urkundliche Erwähnung findet Erlbach 1315 und 1324. Danach sind wenige schriftliche Unterlagen auffindbar.
Kapelle „St. Antonius"
Vom 13. September 1674 gibt es eine Notiz, dass der Abt des Klosters Kaisheim eine Kapelle eingeweiht hat. Die heutige Kapelle „St. Antonius" wurde im Jahr 1819 erbaut. Sie ersetzte die alte, baufällige Kapelle. Nach Errichtung einer Kirchenstiftung erteilte das Bistum Augsburg und der Grund- und Gerichtsherr General von Eckart zu Bertoldsheim die Erlaubnis Messen lesen zu dürfen. Trotz immer wieder erfolgter Erhaltungsmaßnahmen war 2004 eine Generalsanierung in Höhe von ca. 100.000 € erforderlich. Die Innenausstattung mit dem Altarbild des heiligen Antonius von Johann Fröschle, der heiligen Anna und dem heiligen Joachim sowie einem auf Holz gemalten Kreuzweg schmücken den Innenraum. Erlbach gehört zur Pfarrei Bertoldsheim.