Torrebaja fue una aldea de Castielfabib que con la desparición de los Señoríos y Mayorazgos en 1808 se se constituyó en municipio independiente. Tras la orden de la regente María Cristina por la que se debían disolver los municipios de menos de 30 vecinos, en el años 1841 Torre‑Alta unió su destino municipal a Torrebaja.
Torrebaja acogió desde su fundación la inmigración de gentes de otros pueblos de la comarca, como se puede observar por los apellidos de los vecinos de los municipios del entorno comarcal. Es también Torrebaja el pueblo más moderno y cosmopolita de la comarca, quizás por su situación y comunicaciones en relación con los demás pueblos.

En Torre‑Alta, aldea de Torrebaja, podemos ver el magnífico Torreón y Casa Solariega de los Garcés de Marcilla, uno de cuyos descendientes, llamado D. Diego, es al que se le atribuye el protagonismo masculino  en "Los Amantes de Teruel".

En Torrebaja se conserva la Casa del Señor de Castilblanque, con su hermosos torreón de "Los Picos", en la plaza del Ayuntamiento, vigilando el paso del Turia junto al "Rento".

La ermita de San Roque, en las Eras, es una de las pocas   del pre‑Rincón de Ademuz, del que nos habla la Carta‑Puebla que firmara Pedro II de Aragón (padre de Jaime I el Conquistador) en el año 1210 en la plaza de las Armas de Castielfabib.

Otra ermita, la de San José, se halla en el paraje de "Los Villares", primitivo asentamiento árabe de la antigüa Torre Hondonera (Torrebaja) del Villar de Orcheta, probablemente mezquita‑oratorio de los tiempos anteriores a la conquista cristiana.