Hrad založil východočeský šlechtic Tas ve druhé polovině 13. století. Roku 1426 se na Vízmburku uvádí Jiřík z Dubé a Vízmburka a v roce 1447 byl hrad vypálen a zbořen Slezany.

Z hradu se dochovalo zdivo až do výše prvního patra. Hrad býval celý zasypán a nyní se vyskytl problém s jeho konzervací. Nekvalitní kámen, ze kterého byl postaven se působením přírodních vlivů rozpadá. Nyní je hrad provizorně zastřešen.