OL 1906, som ble arrangert i Athen, viste seg å være ekstraordinært fordi arrangørene ikke overholdt kravet om den tradisjonelle fireårige pause mellom spill. Av denne grunn ble OL ikke en gang offisielt anerkjent av Den internasjonale olympiske komité.
Lekene i 1906 ble arrangert for å feire tiårsdagen for den første olympiaden, som også ble arrangert i Athen. For å understreke sammenhengen mellom de to arrangementene ytterligere, valgte arrangørene av OL den samme konkurranseordningen som i 1896. For det meste ble konkurransene holdt på Marble Stadium.
Først da det ble mottatt et forslag fra Hellas om å holde OL i 1906, ga IOC ikke et kategorisk avslag. Fakta er at prestisjen til de olympiske leker på den tiden hadde falt, og publikum viste ikke lenger den tidligere interessen for dem. For å forhindre den olympiske bevegelsens endelige sammenbrudd var det nødvendig å iverksette tiltak, og det var ikke lenger mulighet til å vente til 1908. Og selv om IOC senere nekter å anerkjenne OL i 1906, vil det bli kalt frelsen for spillene, som tillot publikum og spesielt idrettsutøvere å komme tilbake til arrangementet, for å støtte bevegelsen og selve ideen.
Vanskeligheten var også at OL ifølge tradisjon skulle holdes i forskjellige land i verden, men i 1906 var arrangementet planlagt å bli avholdt i Hellas, noe som forårsaket misnøye blant medlemmene av IOC. En eller annen måte, men 22. april ble den store åpningen av spillene holdt. Da media fokuserte på OL i 1906, ankom mange idrettsutøvere og gjester Athen.
Arrangementet deltok av rundt 900 idrettsutøvere fra 20 land, dessuten var det syv kvinner. Som en del av OL i 1906 ble det arrangert konkurranser i følgende idretter: vektløfting, gresk-romersk bryting, gjerder, roing, seiling, svømming, dykking, friidrett, felle- og kuleskyting, sykling og tennis. Dessverre, siden IOC ikke anerkjente OL i 1906, var alle priser mottatt av deltakerne ugyldige og ble ikke tatt i betraktning i fremtiden.
Avslutningsseremonien til OL fant sted 2. mai. Etter avslutningen av arrangementet ble resultatene diskutert lenge i forskjellige land, noe som økte offentlig interesse for spill betydelig. Dette ble spesielt merkbart under OL i London 1908, hvor mer enn 2000 idrettsutøvere deltok.
