XXIII kesäolympialaiset 1984 kuuluivat tuohon ajankohtaan nykyaikaisessa olympialiikkeessä, jolloin kaikki ROK: n jäsenvaltiot boikotoivat jokaista urheilufoorumia. Tämä tapahtui edellisissä Moskovan peleissä, ja myös Yhdysvaltojen Los Angelesissa pidetyt 1980-olympialaiset pysyivät muistissa lähinnä sen 16 maan boikotoinnin vuoksi.
Ensimmäiset olympialaiset Los Angelesissa pidettiin vuonna 1932. Sen jälkeen Amerikan kansallinen olympiakomitea nimitti yhden Yhdysvaltain kaupungeista jokaiselle seuraavalle KOK-äänestykselle. Pyrkimykset palauttaa kesäpelit takaisin maahan eivät kuitenkaan puoli vuosisataa ole onnistuneet. Los Angeles sisällytettiin jälleen äänestyslistaan valittaessa kaupunkia vuoden 1976 olympialaisiin, mutta KOK suostui Kanadan Montrealia. Seuraavassa äänestyksessä Los Angeles hävisi Moskovan vaalit, ja vuonna 1978 amerikkalaiset olivat lopulta onnekkaita Ateenassa. KOK: n 80. istunnossa Teheran peruutti hakemuksensa ja ennen ratkaisevaa äänestystä Yhdysvaltojen kaupunki oli ainoa ehdokas XXIII kesäolympialaisiin.
Los Angeles on Yhdysvaltojen toiseksi asutuin kaupunki, joka sijaitsee Kaliforniassa lähellä Meksikon rajaa. Maailmassa tämä kaupunki liittyy useimmiten viihdeteollisuuteen, koska juuri se sijaitsee kuuluisa "unelmatehdas" - Hollywood. Los Angeles rakennettiin Santa Monican Tyynenmeren rannalle vuonna 1781, ja se kuului alun perin Meksikoon, mutta vuonna 1848 siirtyi Yhdysvaltoihin Yhdysvaltojen ja Meksikon sodan päättymisen jälkeen. Kaupungin nopea kasvu alkoi 1800-luvun lopulla, kun alueelta löydettiin öljyvarastoja. Olympialaisten aikaan se oli jo metropoli, jossa oli yli kolme miljoonaa ihmistä.
Los Angelesissa he reagoivat erittäin rationaalisesti XXIII-olympialaisten kustannuksiin. Vain kaksi uutta urheilutilaa rakennettiin - velodromi ja uima-allas. Pelien avaus- ja päättäjäiset järjestettiin samassa stadionissa, joka isännöi olympialaisia vuonna 1932. 28. heinäkuuta ja 12. elokuuta 1984 välisenä aikana 140 maan urheilijat pelasivat 221 palkintokokonaisuutta 23 urheilulajissa. Neuvostoliiton ja 13 muun sosialistisen maan edustajien poissa ollessa Yhdysvaltojen olympialaisten hallitseva asema oli ehdoton. He saivat 174 mitalia - suunnilleen samat neljä maata voittivat yhdessä seuraavista mitalisarjan riveistä.