Narodil se v Belgii do rodiny designerů hudebních nástrojů a už jako malý kluk vyráběl vlastní instrumenty. Dali mu jméno Antoine-Joseph, ale nikdo mu neřekl jinak než Adolphe. Jako dítě přežil pád ze tří pater, výbuch střelného prachu, popálení, otravu a další smrtelné nehody. Brzy se odstěhoval do Paříže, kde sestrojil saxotrombu, saxhorn nebo saxtubu. Nesmrtelnost mu však přinesl saxofon, který si nechal patentovat 28. června 1846. Vlastně jich navrhl 14 různých druhů. Skladatelé však saxofon dlouho ignorovali. Jakž takž se ujal ve vojenských kapelách. Masivní obliby se tak dočkal až po Saxově smrti s nástupem jazzu. Sax za svého života třikrát zbankrotoval a zemřel v naprosté chudobě.