Breitenbrunn se nachází v centrální části Krušných hor mezi vrcholy Fichtelberg (1215 m n. m.) a Auersberg (1018 m n. m.) přímo na sasko-české hranici. Breitenbrunn, obklopený rozsáhlými smrkovými lesy podél státní silnice 273, se zvedá z nadmořské výšky 550 m v údolí Schwarzwassertal do výšky přibližně 950 m v Halbemeile.
Nejznámější místní vrcholy jsou Rabenberg 913 m n. m. a Sauberg 797 m n. m.