Джей вырос в Квинсе, учился в средней школе Джамейки, а затем продолжил образование в Квинс-колледже, где в 1954 г. получил степень бакалавра. В 1955 г. он вступил в ВВС США и продолжал служить в звании старшего лейтенанта до 1957 года, когда был с честью уволен в запас в звании капитана. Он жил с женой и двумя детьми в Порт-Вашингтоне, штат Нью-Йорк. В 1971 г. они переехали в Энсино, штат Калифорния, где Джей сделал успешную карьеру в области бухгалтерского учёта. На протяжении почти 50 лет, вплоть до выхода на пенсию, он занимался своей практикой, специализируясь в швейной и текстильной промышленности. Сначала работая в Clarence Rainess & Co., затем в Joseph Herbert & Co., а в 1978 г. основал собственную фирму Goldfarb, Whitman & Cohen. Со временем эта фирма стала одной из самых известных и уважаемых аудиторских фирм Лос-Анджелеса. Кроме того, Джей много лет сотрудничал с "Городом надежды" - частным некоммерческим клиническо-исследовательским центром, расположенным в Дуарте, Калифорния., - и занимал должность заместителя председателя Совета управляющих центра. Последние четыре года Джей вёл героическую борьбу с раком и болезнью Паркинсона.

Джей - уменьшительное от английских имён James, Jacob, Jared, Jeremy, John, Jonathan, Joseph, Jason, Jordan, Justin и др. Фамилия Гольдфарб в переводе с идиш и немецкого означает "золотой цвет".