La Vicomté de Cabrera s’articulait autour d’un réseau de châteaux et de maisons fortes, qui constituaient les sièges du pouvoir politique et militaire de la noblesse médiévale. Ce système défensif était complété par plusieurs villes fortifiées et tours de guet.

La tour des Frères doit son nom au bâtiment situé en face, aujourd’hui occupé par la mairie d’Hostalric, où se trouvait autrefois le couvent des frères minimes de l’ordre de Saint François de Paule. Construite au XIIIe siècle, la tour est le plus haut élément défensif d’Hostalric, avec ses trente-trois mètres de hauteur. Elle comporte trois étages et son entrée d’origine se trouvait au premier étage, sans escalier fixe, afin d’en faciliter la défense. Son sommet était couronné d’un magnifique mâchicoulis continu, dont certains vestiges sont encore visibles. Toutefois, pendant la guerre d’Espagne, un bombardement survenu en 1810 provoqua l’effondrement d’une grande partie du sommet de la tour. Aujourd’hui, les trois étages sont ouverts aux visiteurs et accueillent une exposition permanente consacrée à Hostalric au Moyen Âge et à la guerre d’Espagne. Un ascenseur permet d’accéder au belvédère aménagé sur la terrasse.