У ХI ст. тут стояло укріплення, яке пізніше в ХII-ХIII ст. угорські королі звели до статусу королівського замку Канків (прізвище одного із власників замку в ХIII ст.). У 1399 р. угорський король Жігмунд I дарує фортецю барону П. Перені, який відзначився у битві з турками 1396 р. На місці дерев’яного укріплення новий господар зводить кам’яну фортецю, яка повинна була ,,зміцнити могутність держави, забезпечити мир і спокій для дворян, щоб вони могли жити без страху”. У ХV столітті барон Перені передає фортецю ченцям-францисканцям, які перетворюють його в монастир.
Через століття в 1556 р. в період реформації один з нащадків барона Перені стає протестантом і виганяє католицьких монахів зі своїх володінь. Проти Перені виступив загін королівських військ Австрійської імперії і під час штурму замок був зруйнований.