Nos fins do séc. IX, apareceu por estas paragens um cavaleiro godo de nome Leopigunus; criou a sua Villa , onde cresceu o pequeno povo denominado Lobazim. É no séc. XIII que o nome de Lobazim começa a ser substituído por Castelo, provavelmente decorrente da edificação no morro do hodierno Santuário de N.ª Sr.ª Da Conceição. O concelho foi extinto em 1834 e inserto, ficando a relembrar a jurisdição de outrora o pelourinho datado de 1669.
História, Paisagem e Património de Castelo (excerto do livro 'Avatares da Memória', de Jaime Gouveia, que colige uma série de artigos publicados no Jornal Beirão)