L'enceinte qui enveloppe aujourd'hui le Castellet village est déjà mentionnée en 1323. Elle est percée par deux portes, au sud le Grand Portail, contemporain de l'enceinte et à l'est, le Portalet, restauré et élargi pour la commodité des habitants, aux XVIIème siècle. L'ensemble est inscrit à l'Inventaire Supplémentaire des Monuments Historiques.