Antoni Gaj urodził się we Francji w roku 1790. Otrzymał podstawowe wykształcenie i został przyuczony do zawodu ślusarza. Od wczesnej młodości pragnął zostać zakonnikiem, ale nigdy mu się to nie udało z powodu dziwnych zaburzeń, rzekomo na tle nerwowym. Z tego powodu często przebywał w domach dla nerwowo chorych.