Boks pojawił się po raz pierwszy w programie Igrzysk w 1904 roku, czyli już podczas trzeciej edycji w czasach nowożytnych. Od tego czasu był rozgrywany podczas każdej edycji (poza Igrzyskami Olimpijskimi w Sztokholmie w 1912 roku). Samo to świadczy o tym, jak ważna dla olimpizmu jest to dyscyplina. Na przestrzeni lat zmieniały się jednak rozgrywane konkurencje wagowe.
W 1904 roku było to 7 konkurencji, w 1908 5 kategorii, a w latach 1984-2012 było ich 12. Od Igrzysk w Londynie w 2012 rozgrywa się ich 10. Warto również odnotować inne ważne zmiany, które następowały na przestrzeni lat. Do 1948 roku przegrani półfinaliści rywalizowali w pojedynku bokserskim o brązowy medal. Z tego pomysłu jednak zrezygnowano ze względu na krótki czas regeneracji przed kolejnym pojedynkiem.
W związku z tym od Igrzysk Olimpijskich w 1972 roku wprowadzono zasadę, że brązowymi medalistami są obaj przegrani półfinałów. Co ciekawe, zaległe medale otrzymali również półfinaliści z lat 1952-1968. Kolejna ważna zmiana miała miejsce podczas Igrzysk Olimpijskich w Londynie w 2012 roku, gdzie zadebiutował boks kobiecy. Cztery lata później do rywalizacji dopuszczono natomiast bokserów profesjonalnych. Wcześniej boks na Igrzyskach był przeznaczony dla amatorów.