Der Fennberg ist erstmals in den Gründungsaufzeichnungen des nahegelegenen Augustiner-Chorherrenstifts St. Michael an der Etsch im Jahr 1144/45 als Mons Faone urkundlich bezeugt. Vermutlich geht der Name auf eine Verbindung des lateinischen fagus mit dem Suffix -onia zurück und bedeutet so viel wie Buchenwald.