Квазімодо народився з фізичними вадами. Віктор Гюго пише, що все тіло його було неправильної форми, він був горбатий, хромий і мав величезну бородавку на лівому оці. Пакетті Шантфлері замість її первістка підкинули Квазімодо, але нещасна мати при його вигляді мало не збожеволіла, і хлопчика забрали.