Med razpravo o III olimpijskih igrah se je Mednarodni olimpijski komite odločil, da ga organizira v ZDA, saj je ta država v prejšnjih dveh igrah pokazala dobre rezultate. Sprva so želeli organizirati olimpijske igre v Chicagu ali New Yorku, a je zato izbira padla na majhnem pristaniškem mestu St. Louis.
III olimpijada v St. Louisu, skupaj s Parizom, je potekala v okviru svetovne razstave. Vendar lokalno vodstvo razstave ni štelo za konkurenta, ampak nasprotno, dalo je vse od sebe, da bi igre uporabilo za lastne oglaševalske namene. Poleg tega so organizatorji ponovili nekaj napak poletnih olimpijskih iger leta 1900 v Parizu. Zaradi navezanosti na svetovno razstavo so bila tekmovanja umaknjena v ozadje, same olimpijske igre pa so se raztezale skoraj 5 mesecev (1. julij - 23. november 1904). Številna tekmovanja so potekala pod vodstvom različnih strokovnih organizacij, kljub temu pa so vsi dobili naziv olimpijske discipline.
Po podatkih MOK se je na poletnih igrah v St. Louisu udeležilo 12 držav. Edina država, ki se je tekmovanja prvič udeležila, je bila Južna Afrika. V primerjavi s pariškimi olimpijskimi igrami se je število sodelujočih držav močno zmanjšalo. Trinajst držav, ki sodelujejo na pariških poletnih igrah, zaradi ekonomskih razlogov ni moglo priti v St. Louis. Rusija, ki se je takrat borila z Japonsko, na tekmovanjih ni sodelovala.
Na III poletnih olimpijskih igrah je skupaj nastopilo 651 ljudi, od tega 6 žensk. Tekmovali so za 94 nizov nagrad v 18 športih. Največja ekipa so bile Združene države Amerike, ki so na igrah predstavljale 533 ljudi. V številnih športih (boks, rokoborba, vaterpolo, lokostrelstvo in tenis) so nastopali le ameriški športniki, tako da so igre jasno pokazale primat države.
V St. Louisu so prvič začeli nagrajevati tri, ne dva športnika, ki sta pokazala najboljši rezultat. Glavni zmagovalec natečaja je prejel zlato medaljo; drugo mesto športnik - srebro; tretje mesto pa je zaznamovalo bronasto priznanje. Ta tradicija se je ohranila do danes.
V neuradnem ekipnem razvrščanju so sodelujoče države naslednje: I mesto - ZDA (78 zlatih, 82 srebrnih, 78 bronastih medalj), II mesto - Nemčija (4 zlate, 4 srebrne, 5 bronastih medalj), III mesto - Kuba (4 zlate, 2 srebrni, 3 bronaste medalje).
