El castillo de Agón, antiguo ahones o agones, ya existía en el año 1080. Perteneció a los Luna de Almonacid hasta 1413. También perteneció al Conde de Contamina y Marqués de Bárboles.
Del castillo y recinto amurallado sólo quedan restos de una gran torre rectangular de 12 x 6 metros, antigua torre mudéjar de vigilancia perteneciente al siglo XV, bastante maltrecha y situada sobre un leve altozano. En su base hay grandes sillares que podrían ser romanos, y el resto es de tapial con aristas de ladrillo.
Principales referencias consultadas: Páginas del Ayuntamiento y de la Comarca, Zaragoza Turismo (DPZ), Red Aragón, Gran Enciclopedia Aragonesa y Wikipedia.