Окончив среднюю школу, Эллиот с 1943 по 1946 г. служил в армии США. Окончил Пенсильванский университет в 1949 г. и 14 лет проработал на различных должностях в сети универмагов "Мэйсис". В 1962 г. Джаффе с помощью жены Розлин открыл собственное дело - пилотный магазин женской одежды в Стэмфорде, Коннектикут, который заложил основу сети магазинов Dress Barn (официальное название - Ascena Retail Group Inc.). Эллиот занимал пост главного исполнительного директора компании с 1966 до 2002 г., затем стал председателем компании - до выхода в отставку в 1916 г. - в 90 лет! Джаффе также занимал директорские посты в Smith Barney Family of Funds, в Citigroup Funds (с 1990 г.), в Национальной федерации розничной торговли (с 1994 г.), в Фонде Стэмфордской больницы (с 1997 г.) и в Zweig Total Return Fund (с 1988 г.). В 2003 г. Джаффе пожертвовал 1,4 млн. долларов Корпусу Мира. Он был членом Наблюдательного совета Школы наук и искусств Пенсильванского университета и членом Попечительского совета Учительского колледжа Колумбийского университета. В честь Эллиота и Розлин назван Институт пищевой аллергии "Джаффе" Медицинского центра Маунт-Сайнай в Нью-Йорке.

Имя Эллиот происходит от названия реки и города Эллиот в Шотландии. Фамилия Иоффе (Яффе) происходит от ивритского слова йафе, которое означает "красивый".

Вне Нью-Йорка

Elliot and Roslyn Jaffe History of Art Building в Пенсильванском университете.