Alban liegt etwa 25 Kilometer östlich von Albi und hat etwa 1000 Einwohner. Der Fluss Assou entspringt an der westlichen Gemeindegrenze. Umgeben wird Alban von den Nachbargemeinden Saint-André im Norden, Curvalle im Osten und Nordosten, Paulinet im Süden sowie Le Fraysse im Westen und Nordwesten.
Westlich der Gemeinde finden man den Dolmen “Palet von Notre-Dame”