În timp ce discuta problema organizării Olimpiadei a III-a, Comitetul Olimpic Internațional a decis să o organizeze pe teritoriul Statelor Unite, deoarece această țară a dat rezultate bune la cele două jocuri anterioare. Inițial, au vrut să organizeze olimpiadele de la Chicago sau New York, dar ca urmare, alegerea a căzut asupra micului oraș portuar St. Louis.
A III-a olimpiadă din St. Louis, împreună cu olimpiadele de la Paris, a avut loc în cadrul Expoziției Mondiale. Cu toate acestea, conducerea locală a Expoziției nu a considerat-o ca un concurent, ci, dimpotrivă, a încercat în orice mod posibil să folosească jocurile în scopuri publicitare proprii. În plus, organizatorii au repetat câteva dintre greșelile Jocurilor Olimpice de vară din 1900 de la Paris. Datorită atașamentului la Expoziția Mondială, competițiile au fost împinse în fundal, iar olimpiadele în sine au durat aproape 5 luni (1 iulie - 23 noiembrie 1904). Multe competiții au avut loc sub conducerea diferitelor organizații profesionale, cu toate acestea, în ciuda acestui fapt, toți au primit titlul de discipline olimpice.
Potrivit CIO, 12 țări au participat la Jocurile de vară din St. Louis. Singurul stat care a participat la competiție pentru prima dată a fost Africa de Sud. Comparativ cu Jocurile Olimpice de la Paris, numărul țărilor participante a scăzut dramatic. Cele 13 state care au participat la Jocurile de vară de la Paris nu au putut să vină la St. Louis din motive economice. Rusia, care era în război cu Japonia la acea vreme, nu a participat la competiție.
Un total de 651 de persoane au luat parte la Jocurile Olimpice de vară III, inclusiv 6 femei. Au concurat pentru 94 de seturi de premii în 18 sporturi. Cea mai numeroasă a fost echipa Statelor Unite ale Americii, au reprezentat 533 de persoane la jocuri. În multe sporturi (box, lupte, polo pe apă, tir cu arcul și tenis), doar sportivii americani au evoluat, astfel încât jocurile au demonstrat clar superioritatea țării.
La St. Louis, pentru prima dată, au început să premieze cei trei, nu doi, sportivi care au arătat cel mai bun rezultat. Câștigătorul principal al competiției a primit o medalie de aur; sportivul care a ocupat locul doi - argint; iar locul trei a primit o medalie de bronz. Această tradiție a supraviețuit până în prezent.
La evenimentul neoficial pe echipe, țările participante au fost poziționate după cum urmează: locul I - SUA (78 de aur, 82 de argint, 78 de medalii de bronz), locul II - Germania (4 de aur, 4 de argint, 5 medalii de bronz), locul III - Cuba (4 medalii de aur, 2 de argint, 3 de bronz).
