Халықаралық олимпиадалық комитет III олимпиаданы өткізу мәселесін талқылай отырып, оны АҚШ аумағында ұйымдастыруға шешім қабылдады, өйткені бұл ел алдыңғы екі ойында жақсы нәтиже көрсетті. Бастапқыда олар Олимпиаданы Чикагода немесе Нью-Йоркте өткізгісі келді, бірақ нәтижесінде таңдау шағын порт Сент-Луиске түсті.
Сент-Луистегі III олимпиада Париж Олимпиадасымен бірге Дүниежүзілік көрме аясында өтті. Алайда, Көрменің жергілікті басшылығы оны бәсекелес деп санамады, керісінше, ойындарды өздерінің жарнамалық мақсаттары үшін қолдануға тырысты. Сонымен қатар, ұйымдастырушылар 1900 жылғы Париждегі жазғы Олимпиада ойындарының кейбір қателіктерін қайталады. Дүниежүзілік көрмеге қосылудың арқасында жарыстар екінші планға ығыстырылып, Олимпиаданың өзі 5 айға созылды (1904 ж. 1 шілде - 23 қараша). Көптеген жарыстар әр түрлі кәсіби ұйымдардың басшылығымен өткізілді, дегенмен, олардың барлығына олимпиадалық пәндер атағы берілді.
ХОК мәліметі бойынша Сент-Луис жазғы ойындарына 12 мемлекет қатысты. Жарысқа алғаш рет қатысқан жалғыз мемлекет Оңтүстік Африка болды. Париж Олимпиадасымен салыстырғанда қатысушы елдердің саны күрт төмендеді. Жазғы Париж ойындарына қатысқан 13 мемлекет Сент-Луиске экономикалық себептермен келе алмады. Сол кезде Жапониямен соғысқан Ресей бұл жарысқа қатысқан жоқ.
III Жазғы Олимпиада ойындарына барлығы 651 адам қатысты, оның 6-ы әйелдер. Олар спорттың 18 түрінен 94 сыйлық жиынтығы үшін таласты. Ең көп саны Америка Құрама Штаттарының командасы болды, олар ойындарға 533 адам қатысты. Көптеген спорт түрлерінде (бокс, күрес, су добы, садақ ату және теннис) тек американдық спортшылар өнер көрсетті, сондықтан ойындар елдің басымдылығын айқын көрсетті.
Сент-Луисте олар бірінші рет ең жақсы нәтиже көрсеткен екі емес, үш спортшыны марапаттай бастады. Жарыстың басты жеңімпазы алтын медальмен марапатталды; екінші орын алған спортшы - күміс; және үшінші орын қола медальмен марапатталды. Бұл дәстүр бүгінгі күнге дейін сақталды.
Ресми емес командалық есепте қатысушы елдер келесідей орналасты: I орын - АҚШ (78 алтын, 82 күміс, 78 қола медаль), II орын - Германия (4 алтын, 4 күміс, 5 қола медаль), III орын - Куба (4 алтын, 2 күміс, 3 қола медаль).