Родители Бенджамина иммигрировали в Америку из Баварии в 1835 г. и открыли магазинчик на Атторни-стрит в Манхэттене. В 1865 г. Олтман открыл собственный бизнес на Третьей авеню, позднее присоединил к нему магазин на Шестой авеню, принадлежавший его брату Моррису (1837 - 1876). В 1906 г. Олтман открыл огромный универмаг на Пятой авеню и 34-oй стрит и вместе с Майклом Фридсэмом основал фирму "Б. Oлтман и Ко". Бенджамин считался законодателем женской моды, особенно в области тканей. Он был также директором банка "Метрополис". С юности интересовавшийся искусством, Олтман собрал прекрасную коллекцию китайского фарфора. Его коллекция работ Рембрандта считается самым большим за всю историю частным собранием работ этого мастера. Олтман завещал все свои коллекции (их стоимость - в то время! - оценивалась в 20 миллионов долларов) Музею Метрополитэн; в одной из галерей Музея висит посвящённая ему памятная доска. Огромную часть своего состояния он завещал основанной им благотворительной организации "Олтман Фаундейшн".
 

Имя Бенджамин - английская форма библейского имени Биньямин. Фамилия Олтман образована немецкими словами alt - "старый" и Mann - "человек".