Über die Frage, wie es Mitte der 1920er Jahre zu dem für ein Stadion außergewöhnlichem Namen „Alm“ kam, kann heute nur noch spekuliert werden. Der Überlieferung nach soll sich das damalige Clubmitglied Heinrich Pehle nach der Auswahl des Standorts an der Bielefelder Melanchthonstraße bei der Begutachtung der steinigen und holprigen Baustelle dahingehend geäußert haben, dass nur noch ein paar Kühe fehlten und man befände sich auf einer Alm. Humorvolle Zungen behaupten, dass das Stadion deshalb "Alm" hieße, weil es der höchstgelegene Bundesliga-Spielort sei – man brauche dort ein Jahr für den Aufstieg und ein Jahr für den Abstieg. Als der Sportplatz 1926 offiziell unter dem Namen „Alm“ errichtet wurde, hatte er mit einem Stadion noch nicht viel gemein. Erst 1957 erhielt der Platz eine Rasendecke und Stehstufenränge. Mit dem ersten Bundesligaaufstieg 1971 wurde eine Sitzplatztribüne geschaffen. Seit 1978 war das Stadion an den drei anderen Seiten von Stahlrohrtribünen umbaut. Da es zu jener Zeit nur 5.478 Sitzplätze gab, fasste das Stadion damals 34.222 Zuschauer.