第一届奥运会有13个国家参加,分别是澳大利亚、奥地利、保加利亚、英国、匈牙利、德国、丹麦、美国、法国、智利、瑞士、瑞典和东道主希腊。其中希腊阵容最大,共230人占总数的三分之二;德国、法国各19人;美国14人,居第四位。
首届奥运会对参加国的资格,不象今天有非国际奥委会会员国不得参加的规定。希腊向包括中国在内的世界各国发出了邀请,但绝大多数国家因对奥运会不甚了解或其他原因,都未派队出席,中国亦属此列,意大利曾去了一名米兰运动员,这也是意大利派出的唯一选手,大会组委会认为他是职业运动员,因此未被允许参加。