A Torre de Vilharigues é o que resta do castelo que ali existiu, pertencendo ao conjunto de castelos, torres senhoriais e atalaias, formando assim o sistema defensivo nesta região de Lafões desde o séc. XI.
Paços de Vilharigues, situada na encosta da Serra do Caramulo, fazendo parte do vale de Lafões, é uma das aldeias privilegiadas dando o seu contributo para a defesa do território.