Альфред родился в семье евреев - иммигрантов из Российской империи. Окончил инженерный факультет нью-йоркского Сити-колледжа в 1963 году. Владел строительной компанией Alfred Wilner, Inc. В последние годы жил с женой Одри в г. Манхэттен Бич, Калифорния.

Имя Альфред - древнеанглийского происхождения, состоит из элементов ælf - "эльф" и ræd - "совет". Фамилия Вильнер произошла от названия города Вильно (ныне Вильнюс, Литва).