Patrně na počátku 13. století zde vyrostl hrad. Stal se sídlem pánů z Hazlova, kterým patřil do počátku 15. století. Tato rodina se dostala do sporu s Chebem, neboť přepadávala jeho obyvatele. Když tato situace přesáhla svou mez, opustili své statky. Od roku 1401 až do roku 1492 se v držení objektu vystřídalo několik občanů Chebu. V 16. století se dalo přednost hospodářskému vývoji. Tehdejší majitelé hradu Moserové zřídili pivovar a několik dvorů s ovčíny. Ti se dostali do finančních problémů a roku 1628 prodávají hazlovské panství. Poslední zdejší pán byl Friedrich Helmfeld, který opustil Hazlov roku 1945.
Hazlovský hrad prošel gotickými úpravami. Další zásahy proběhly v renesančním a barokním slohu.
Roku 1687 byla do hradního komplexu vestavěna loď kostela Povýšení sv. Kříže. Dodnes se z hradu dochovala románská věž a okolní neudržované budovy.