Участник Второй мировой войны. В течение двадцати лет преподавал технические предметы в школе № 68 в Канарси, Бруклин. Был президентом Совета школьного округа 21 (Бруклин), командиром отделения в Организации евреев - ветеранов войн, членом районного совета №13 в Бруклине. Был активистом Демократической партии, делегатом Национальных конвентов партии в 1984 и 1988 годах, руководителем аппарата члена Городского совета Сэма Хорвица.

Имя Гарри - английская форма германского имени Heimirich (позже Heinirich), состоящего из элементов heim - "дом" и ric - "власть". Фамилия Шварц произошла от идишского слова шварц, которое означает "чёрный".