Tyto dva hrady jsou od sebe vzdáleny necelý kilometr. Točník stojí na Zámeckém vrchu, zatímco Žebrák je posazen v podstatně nižší poloze. Žebrák byl založen kolem roku 1280 Oldřichem Zajícem z Valdeka. Roku 1336 hrad koupil Jan Lucemburský a stal se královským majetkem. Král Jan a jeho syn Karel IV. zde občas odpočívali při cestách do západních Čech a zejména do říše. Hrad si oblíbil i Václav IV., který zde vydal povolení ke stavbě Betlémské kaple. Později si však na protilehlém kopci vybudoval Točník.
Po jeho smrti se zde střídalo mnoho šlechtických rodin. Roku 1532 hrad vyhořel a jeho zkázu dokonal držitel panství Volf Krajíř z Krajku, který zde marně hledal poklad Václava IV. Ve 20. století byl hrad zrekonstruován a zpřístupněn veřejnosti.