Il a été commencé sous l’empereur Vespasien et terminé sous son fils Titus en 80 apr. J.-C., et son fils cadet Domitien l’a encore modifié ; comme tous trois appartenaient à la famille flavienne, des érudits l’ont appelé plus tard l’amphithéâtre flavien. Le nom populaire vient probablement de la statue colossale en bronze de Néron qui se dressait à côté. Pendant des siècles, il a accueilli des dizaines de milliers de spectateurs pour des combats de gladiateurs, des chasses d’animaux, des exécutions et d’autres spectacles publics.

Vespasien l’a fait construire à l’emplacement du lac de la Domus Aurea de Néron, les terrains du palais que Néron avait pris après le Grand Incendie de 64 apr. J.-C., ce qui a rendu une partie de la ville au peuple. Une inscription indique que les travaux ont été payés avec la part de Vespasien du trésor emporté du Temple de Jérusalem après le siège de la ville. Plus de 9 000 animaux sauvages seraient morts lors des jeux d’inauguration. Les combats de gladiateurs sont mentionnés pour la dernière fois vers 435, tandis que les chasses d’animaux se sont poursuivies au moins jusqu’en 523.

L’édifice se dresse isolé sur un terrain plat, son plan mesurant 189 mètres de long et 156 mètres de large. La portion conservée de la façade extérieure, du côté nord, montre trois niveaux d’arcades encadrées de demi-colonnes doriques, ioniques et corinthiennes sous un haut attique ; les contreforts de brique à chaque extrémité ont été ajoutés au début du XIXe siècle, et le reste de l’extérieur actuel est en fait l’ancien mur intérieur. Des trous laissés par l’arrachage des agrafes de fer criblent encore le travertin. Le long du sommet, 240 consoles de pierre tenaient autrefois les mâts du velarium, un auvent de toile manœuvré par des marins de la flotte de Misène.

La foule était gérée à peu près comme dans un stade moderne. Quatre-vingts entrées de plain-pied étaient numérotées, tout comme les escaliers, les spectateurs portaient des jetons de céramique numérotés, et des passages appelés vomitoires permettaient à une salle pleine de se vider en quelques minutes ; les entrées XXIII à LIIII subsistent. Les places suivaient le rang romain : loges de l’empereur et des vestales aux extrémités nord et sud, podium pour les sénateurs, dont les noms se lisent encore gravés dans la pierre, puis chevaliers, citoyens et, tout en haut, une galerie que Domitien a ajoutée pour les pauvres, les esclaves et les femmes.

Il reste peu du plancher de bois recouvert de sable de l’arène, si bien que les visiteurs regardent directement l’hypogée, le dédale de tunnels et de cages sur deux niveaux que Domitien a ajouté en dessous. Les gladiateurs et les animaux attendaient ici, et des monte-charges et des poulies hissaient animaux et décors par quatre-vingts puits jusque dans l’arène ; des tunnels menaient au Ludus Magnus, l’école de gladiateurs située juste à l’est, dont les vestiges sont toujours là. Après la fin des jeux, l’édifice est devenu logements, ateliers, forteresse des Frangipani et carrière, et un tremblement de terre en 1349 a fait tomber la partie extérieure sud. En 1749, le pape Benoît XIV a interdit l’extraction de pierre et l’a consacré à la Passion du Christ, et une fois par an, une procession du Chemin de croix aux flambeaux conduite par le pape part des abords du monument.