Barokní kostel Všech svatých byl postaven v roce 1723 podle plánů Kiliána Ignáce Dientzenhofera. Kostel stojí na půdorysu protáhlého osmiúhelníku se stěnami vně konkávně zvlněnými. V ose presbytáře kostela je kvadratická věž. Heřmánkovický kostel patří ve skupině broumovských kostelů k těm zchátralejším. Snad jen díky obětavosti místních a dobrovolníků se daří udržovat přilehlý hřbitov a faru. Kostel bývá uzavřen veřejnosti.