Históricamente pertenece a las Tierras de Granadilla, pero en la actualidad se engloba en la mancomunidad de Las Hurdes.
El municipio, compuesto por cuatro localidades, cuenta con más de 1000 habitantes, de los cuales más de 800 viven en el pueblo de Casar de Palomero, unos 350 en Azabal, unos 100 en Rivera Oveja y unos 70 en Pedro-Muñoz.
El término municipal de Casar de Palomero limita con:
Patrimonio cultural
En Casar de Palomero confluyeron las tres grandes culturas (judía, árabe y cristiana) y cada una de ellas tiene un barrio en el pueblo.
Se pueden visitar siguiendo las indicaciones de los rótulos de las calles, de este modo, las calles en las que el rótulo tenga grabado una estrella son del barrio judío (alrededores de la Ermita de la Cruz Bendita y barrio de los Barreros), las calles en las que el rótulo tenga grabado una media luna son del barrio árabe (barrio del Llanete, calle iglesia y alrededores de la iglesia del Espíritu Santo y el campanario) y las calles en las que el rótulo tenga grabado una cruz son del barrio cristiano (Santo Cordero).
Fiestas patronales y locales
Otras festividades en el término municipal:
El municipio forma parte de una gran zona de producción de aceituna manzanilla cacereña, aceite de oliva y cerezas exportadas internacionalmente.
Se explotan las denominaciones de origen: “Dehesa de Extremadura” y “Gata-Hurdes”. También tiene gran importancia el turismo rural.
Desde el año 2002 se puede visitar el museo del olivo, centro temático ubicado en un antiguo lagar y en el que se puede consultar todo sobre el olivo, la aceituna y el aceite.