Hrad byl založen ve 14.století, oblíbencem krále Václava IV. Purkartem z Janovic. Od roku 1474 vlastnili objekt Lobkovicové a to po pět století. Lobkovicové hrad goticky a renesančně přestavěli, rozšířili a zdokonalili opevnění. Za Polyxeny z Lobkovic byl Vysoký Chlumec centrem kraje. Plnil funkci střediska rekatolizace celého širokého okolí. Hradní vězení bylo přeplněné evangelíky, kteří se odmítli vzdát své víry.
Jádro hradu tvoří dva paláce, obklopené parkánem a hradbou. Hrad byl v 80. letech zrekonstruován a zpřístupněn veřejnosti. Dnes patří původním majitelům a je soukromým majetkem.