Фэн Ауэрбак выросла в еврейской семье, владевшей универмагами Fox Department Store в Хартфорде, Коннектикут, и в Огдене, Юта, а позже и в других штатах. В 1940 г. она вышла замуж за Лесли Сэмюэлса (1900-1984), владевшего многими предприятиями розничной торговли на Среднем Западе. Вскоре после этого Сэмюэлсы поселились в Нью-Йорке. В 1959 г. они создали благотворительный фонд Fan Fox and Leslie R. Samuels Foundation, предназначенный в основном для поддержки искусства, но работавший также в сфере медицины. Только Линкольн-Центру супруги пожертвовали, в общей сложности, более 13 млн. долларов. В 1982 г. Лесли продал принадлежавшую Фэн большую коллекцию мебели и английских древностей за 4,5 млн. долларов.

Имя  Fan - уменьшительное от Frances. Фамилия Фокс происходит от немецкого Fuchs - "лиса". Фамилия Сэмюэлс - от английской фпрмы библейского имени Самуил. Фамилия Авербах произошла от названия немецкого города Ауэрбах, из которого евреи были изгнаны в 1502 году.