Dal ho vybudovat před rokem 1319 Jan Lucemburský jako strážní stanici k ochraně labské plavby a vybírání poplatků a cel. Vlastní stavbu započal pražský měšťan Pešík z Veitmile. Jedná se o přirozenou dominantu, jeden ze symbolů města Ústí nad Labem a jeden z nejromantičtějších českých hradů.