Руины замка – самый древний исторический памятник города. С IX по XII век на холме на берегу реки находилось укреплённое место поселения древних латгалов, где в конце XIII века магистр Ливонского ордена Вильгельм фон Шауэрбург построил замок Ливонского ордена Розиттен (Castrum Rositten), который служил резиденцией Ливонского фогта.

Замок служил войску ордена в качестве основной опорной точки в битвах с русскими и литовцами в XIV веке. После войны с Литвой (1338 г.), когда Латгалия на недлительный период времени стала нейтральным регионом, в Резекне, как в её административном центре, развивалось ремесло и торговля. Вскоре замок Резекне был вовлечён в новые поединки с Литвой и Россией (1437 г. и 1480 г.). Во время Ливонской войны в 1577 году, войско Ивана Грозного, нарушив обещание, взяло в плен сдавшихся защитников замка, уничтожило населённый пункт и разгромило церковь замка. После распада Ливонии (1561 г.), Резекне вошёл в состав Речи Посполитой, и в результате разрушений после польско-шведской войны, находился в запущении. В 1590 году было только 14 домов. В начале XVIII века о былой мощи свидетельствовали лишь развалины замка.
В наше время Резекненская замковая гора является одной из основных достопримечательностей Резекне, с которой открывается чудный вид на реку и исторический центр города. Через дорогу от замковой горы можно ознакомиться с макетом средневекового замка Розиттен (2003 г., автор Эдмундс Сманс).