Su nombre oficial, Former Imperial Villa Nijo-jo Castle, deja constancia de cómo cambió de manos. Tokugawa Ieyasu ordenó construirlo en 1601, pidiendo a los señores feudales del oeste de Japón que contribuyeran, y se terminó bajo su nieto Tokugawa Iemitsu en 1626. La UNESCO lo incluye en el sitio del Patrimonio Mundial de los Monumentos históricos de la antigua Kioto, un conjunto de diecisiete bienes.

El castillo fue también el lugar donde terminó el poder de los Tokugawa. En 1867, el palacio Ninomaru fue el escenario de la declaración de Tokugawa Yoshinobu que devolvía la autoridad a la Corte Imperial, y en 1868 se instaló en él el Gabinete Imperial. El castillo se convirtió en un palacio imperial secundario, y el emblema de la malva de los Tokugawa se retiró allí donde fue posible y se sustituyó por el crisantemo imperial. En 1939 se cedió a la ciudad de Kioto, que lo abrió al público al año siguiente.

El palacio Ninomaru, entre el anillo exterior y el interior, es la visita principal: seis edificios comunicados de ciprés hinoki, todos ellos Tesoros Nacionales, que ocupan 3.300 metros cuadrados. Las salas se dispusieron para impresionar y jerarquizar a los visitantes, que eran recibidos más adentro cuanto más alto era su rango; el pan de oro, la madera tallada y las pinturas de artistas de la escuela Kanō cubren las puertas correderas y las paredes. El recorrido va desde las salas de entrada, a través del Ōhiroma, el Gran Salón con sus cuatro estancias, hasta el Kuroshoin y, por último, el Shiroshoin, las habitaciones privadas del shōgun. Los pasillos tienen «suelos de ruiseñor» que pían al pisarlos; el sonido lo producen unas grapas que rozan contra los clavos bajo las tablas y no se trata de una alarma contra intrusos, aunque algunas salas sí tienen puertas ocultas para los guardaespaldas del shōgun.

Dentro del anillo interior, el palacio Honmaru es un edificio de finales del periodo Edo, de 1.600 metros cuadrados, trasladado aquí en 1893 y 1894 desde una parte del antiguo palacio Katsura, en el recinto imperial de Kioto, y decorado con pinturas de maestros como Kanō Eigaku. La torre original se alzaba en la esquina suroeste de este anillo hasta que un rayo la incendió en 1750; se conservan sus cimientos de piedra.

Los cerezos y ciruelos japoneses crecen en arboledas por todo el recinto de 27,5 hectáreas, que alberga varios jardines. Junto al palacio, el jardín Ninomaru lo diseñó el maestro de té y paisajista Kobori Enshū en torno a un gran estanque con tres islas, piedras dispuestas con cuidado y pinos podados. En la parte norte del castillo, el jardín Seiryū-en se trazó en 1965 para recibir a los invitados oficiales de la ciudad y para actos culturales, y tiene un par de casas de té entre sus más de 1.000 piedras dispuestas.