Al sur del Arco de Augusto, separado de la Basílica de Cayo y Lucio por el Vicus Tuscus, se encuentra el Templo de Castor y Pólux (Aedes Castores).

El primer templo de Castor y Pólux que se construyó, se edificó en el año 484 a.C. Por Duunviro, el hijo del dictador Aulo Postumio Albino, como agradecimiento por la derrota de los Tarquinos. Según cuenta la leyenda durante la batalla del Lago Regio (496 a.C.) entre Romanos y Latinos, dos jóvenes jinetes, condujeron a la victoria a los Romanos. Después de la batalla, estos jóvenes, Castor y Pólux, cabalgaron hacia Roma y abrevaron sus caballos en la fuente de Juturna.

En el año 117 a.C., L. Cecilio Metelo el Dalmático, reconstruyó y embelleció el templo, tras su victoria sobre los Dálmatas.

En el año 73 a.C. Verres, gobernador de Sicilia, realizó una segunda restauración. La última reconstrucción se debe al emperador Tiberio, tras el incendio del año 14 a.C., consagrándolo de nuevo en el año 6 d.C.

Hoy en día, del templo solo quedan restos en el basamento del edificio que le sucedió en época de Tiberio y tres columnas corintias de 12 metros de altura que se conocen como "las tres hermanas".

Durante la República, el Senado se reunía en algunas ocasiones en este templo y a mediados del siglo II a.C., el podio del Templo se usó como tribuna para oradores y magistrados durante lo comicios que se realizaban en esta parte del Foro.

Recientemente arqueólogos de las Universidades de Oxford y Stanford han descubierto en la que se cree que fue la casa de Calígula en los Foros romanos, que el emperador, más megalómano de lo que nos cuenta la historia, incorporó el Templo de Cástor y Pólux como uno de los accesos a su residencia, dando así un aspecto de mayor majestuosidad a su residencia.