Da nombre al lugar el castillo que se levanta en el centro del casco urbano y a cuya sombra creció el caserío. Se trata de una torre señorial de buena sillería construida a finales del siglo XIV o comienzos del XV. Presenta planta rectangular y en uno de sus frentes, restos de un matacán defensivo. Algunos autores apuntan que la torre sirvió de prisión a Sancho IV el Bravo, hijo de Alfonso X, si bien otros se inclinan a pensar que fue residencia del infante don Sancho, señor de Ledesma y nieto del rey Sabio. En 1990 se rehabilitó su interior para albergar la casa consistorial. También sobresale la parroquial de Nuestra Señora de la O, que presenta planta de cruz latina con nave cubierta con artesanado de casetones y cabecera cerrada por bóveda de crucería. La monumentalidad del templo se refleja al exterior en su bella fachada dieciochesca. En los alrededores del municipio llaman la atención el puente de las Quince Luces, las fuentes Grionera y de la Portuguesa y el lago de la Pesquera con el viejo molino.