Il Sudafrica ha partecipato per la prima volta ai Giochi olimpici nel 1908. Tuttavia, 8 atleti delle colonie britanniche hanno partecipato ai Giochi del 1904, tra cui i primi due neri.
Il Comitato Olimpico e Confederazione Sportiva del Sudafrica venne creato e riconosciuto dal CIO nel 1991. Un precedente comitato, il SANOC, è esistito ed è stato riconosciuto dal 1908, in seguito a una mozione del CIO del 1907 che riuniva le quattro colonie britanniche (del Capo, del fiume Orange, del Natal e del Transvaal) sotto il nome di Africa del Sud. Questo comitato non è più invitato a partecipare dopo il 1962 per causa dell’apartheid, ed è escluso dal movimento olimpico dal 1972. Il ritorno dei sudafricani dovrà aspettare il 1992, trent'anni dopo.