Le château de Budos est construit par Raymond-Guilhem, neveu de Clément V, au début du XIVe siècle. En 1571, Budos est vendu aux La Roque qui le conserveront jusqu’à la révolution.

En 1789, le château est vendu comme bien national, dépecé, puis sert aux paysans du voisinage comme carrière de pierre.

Il est réduit à l’état de ruine lorsqu’il est racheté en 1860 par un descendant des La Roque.

Inscrit à l’inventaire des monuments historique depuis 1988, le château fait aujourd’hui l’objet d’une restauration sous la direction de l’association Adichats.