A mais antiga referência bibliográfica ao castelo é de Miguel Leitão de Andrada, em 1629, na forma de uma lenda muito adulterada. É facto que as escavações arqueológicas realizadas no final do século XX, não identificaram vestígios de romanos ou de lusitanos.

Além dessa, não existe informação adicional acerca da primitiva fortificação, que se acredita remonte ao século X.

No contexto das lutas pela Reconquista cristã da Península Ibérica, o conde D. Henrique de Borgonha (1095-1112), teria determinado o repovoamento do local bem como a reedificação de seu castelo.

Estes domínios pertenceram à Ordem do Templo e, com a sua extinção em Portugal, passaram à Ordem do Hospital. Sob o reinado de D. Afonso V (1438-1481), a povoação recebeu Carta de Foral (1455), confirmado em 1513 por D. Manuel I (1495-1521). Algumas décadas mais tarde, em meados do século XVI, foi Alcaide-mor da Sertã, Vicente Caldeira.

O castelo encontra-se referenciado na publicação inglesa "Handbook for Travellers in Portugal" ("Manual para Viajantes em Portugal"), em 1850, como "extremely picturesque" ("extremamente pitoresco").

Fonte: Wikipédia