Сэм Гордон родился в многодетной семье иммигрантов из Российской империи, окончил East High School в Колaмбусе. Он участвовал в школьных командах по футболу, борьбе и бейсболу, позже играл в футбольной команде Университета штата Огайо. Во время Второй мировой войны Гордон служил офицером Военно-морских сил США. После войны он был кэтчером в полупрофессиональной команде по фастболу. На протяжении многих лет Гордон был президентом строительной компании A. & S. Construction Co. Он принимал активное участие в работе нескольких организаций, включая Temple Israel, Leo Yassenoff Jewish Center и The Wexner Heritage Village.

Имя Сэмюэл - английская форма библейского имени Самуил. Еврейская фамилия Гордон происходит от названия города Гродно в Беларуси.