美国、英国、德国、希腊、挪威、奥地利、匈牙利、瑞士、古巴、加拿大、澳大利亚和首次参加的南非。
第3届奥运会于1904年7月1日至11月23日于美国圣路易举行。
本届奥运会地点一改再改，顾拜旦男爵选中纽约，国际奥委会看中芝加哥，最后由美国总统罗斯福裁决，由圣路易城举办。1902年，国际奥委会会议同意了美国总统的这个裁决。
参加比赛的有来自12个国家的625名运动员（美国533人），其中女选手8人。比赛共设87个小项。
由于远隔重洋，旅费昂贵，欧洲一些国家没有参加。即便派队参加的英、德、澳、匈、瑞士、希腊，总共也只派出了39名运动员。这是欧洲在奥运会史上参加国家最少、人数最少的一次。其他洲的国家的情况也与此相仿。
本届奥运会个别项目（如自行车）仅有美国一国参加。因此，在统计成绩时，有的国家将它列入，有的则不列。另外，有些在美学习或工作的外国人参加了这次比赛，过去国外书刊把他们都作为美国人，现均按实际国籍改正过来。
本届奥运会除设有男子拳击外，还设立了女子拳击。此外，还设有棒球、水球等新项目。同1900年一样，奥运会期间也举办了世界博览会。运动会时间拖得很长。大会组织者拟安排一个有色人种运动员比赛日，但由于遭到顾拜旦的激烈反对而未能举行。
1900第2届奥运会（巴黎）