Gangō-ji está en Naramachi, pero su historia comienza en Asuka-dera o Hōkō-ji, considerado tradicionalmente el primer templo budista completo de Japón. Al trasladarse la capital a Heijō-kyō en 710, la institución se reconstruyó en Nara como Gangō-ji y ocupó un recinto mucho mayor que el actual.
Incendios, cambios políticos y crecimiento urbano lo redujeron. Los salones Gokurakudō y Zen conservan memoria y materiales de las dependencias monásticas y son Tesoros Nacionales; el recinto integra los Monumentos históricos de la antigua Nara de la UNESCO.
