Сол родился в 1923 году. C 12 лет изучал теологию и в итоге
поступил в духовную школу. Примерно в это же время он увлёкся живописью.
Конфликтс отцом начался после покупки первых тюбиков
краски. Живописью, на его взгляд, занимались только неудачники с сомнительным образом жизни.
В 23 года, после очередной ссоры с отцом, Сол собрал чемодан
и сбежал из дома в Нью-Йорк.
В Нью-Йорке Сол Лейтер знакомится с художником-абстракционистом Ричардом Пузетт-Дартом и фотографом Юджином Смитом.
Именно они «заразили» его фотографическим искусством и сильно повлиялина стиль: Юджин подарил будущему фотографу 33 мм камеру Contax, а Ричард увлёк Сола в мир абстрактного экспрессионизма.