Ицхок Немес провёл детство в Хельсинки, Финляндия. Когда разразилась Вторая мировая война, его родители решили покинуть Европу. В 1941 г. семья села на корабль, направлявшийся в Соединённые Штаты. Поездка была долгой и трудной. Корабль разбомбили немцы, и он затонул. В ходе мучительной и драматической операции спасениё пассажиров подобрали небольшие английские суда и доставили на базу английской армии. После их прибытия в Нью-Йорк Реб Ицхок продолжил обучение в хасидской ешиве Томхей Тмимим. Официальным бизнесом Немеса была печать почтовых марок и торговля филателистическими материалами. Его бизнес часто требовал поездок за границу, где он вёл дела с правительствами и частными коллекционерами, и при этом иногда выполнял поручения Любавичского Ребе. Когда реб Ицхок начинал свой бизнес, Ребе дал ему 200 долларов в качестве благословения. Благотворительная деятельность Немеса была разнообразной и яркой. В частности, он организовывал поставки кошерной еды и мацы для евреев нескольких стран Южной Америки.
 

Имя Ицхок - библейского происхождения. Фамилия Немес происходит от слова nemes - "благородный" по-венгерски.