Hrad si nechal postavit v letech 1380-90 Čeněk z Vartemberka. Na každé skále vyrostla věž. Vyšší a štíhlejší dostala název Panna, nižší Baba. Do každé věže vedla jen jedna přístupová cesta. Hrad ležel ve výhodné poloze strmých skal. Po smrti zakladatele přešel hrad do rukou Václava IV.
Roku 1428 postihl hrad požár. Roku 1438 se Trosek zmocnil loupežník Kryštof of z Helfenburka. O rok později byl hrad obléhán, ale loupežnická posádka odrazila útok. Během třicetileté války krajem prošli Švédové a císařští vojáci, kteří Trosky vypálili. Od těch dob už se hrad neopravil. Až dnes probíhá postupná rekonstrukce. Za návštěvu stojí věž Baba, kde se můžeme potěšit pohledem na Český ráj.
