Вероятно, Эдмонду казалось, что синагога, названная в память об отце, завершит его благотворительную деятельность в Нью-Йорке. Аттиа нашел старый таунхаус в 100 ярдах от дома Эдмонда на Пятой авеню и начал разрабатывать планы и добиваться разрешения на строительство синагоги площадью 25 000 квадратных футов, состоящей из пяти этажей и двух подвалов, рассчитанной почти на четыреста прихожан. "Как и в случае с рядом проектов Аттиа для Сафры, соглашение было заключено с помощью рукопожатия".
Но синагога Эдмонда, которую назвали Бейт Яков в память о Якове Сафре, с самого начала оказалась проблемной. Аттиа, работавший с Эдмондом и его братьями с 1978 года, пришел в ярость, "потому что Эдмонд и Лили постоянно меняли свое мнение о том, чего они хотят".
Работа над проектом, серьезно начавшаяся в 1991 году, затянулась до 1993 года. Но кульминация наступила, когда Эдмонд и Лили отказались оплатить счет Аттиа за работу над синагогой и реконструкцию участков для захоронения двух сефардских раввинов в Израиле. Сафры утверждали, что Аттиа выполнил лишь малую часть работы, но выставил счет так, как будто работа уже была завершена. Счет Аттиа был оценен более чем в 600 000 долларов. В результате финансового дефицита он не смог заплатить своим сотрудникам. Он подал иск против Эдмонда в окружной суд США в Нью-Йорке после того, как Эдмонд уволил его в 1993 году. Аттиа потерял так много денег на застопорившемся проекте синагоги, что в середине судебного процесса он уже не мог платить своим адвокатам.
"Он [Эдмонд] сказал мне, что за счета отвечает община Бейт Яаков", - сказал Аттиа в интервью New York Post. "Но он и Лили наняли меня, и во всех смыслах и целях они и есть община".
На первых порах община "Бейт Яков" состояла из членов семьи Эдмонда и его сотрудников. Одним из попечителей был Жаки Сафра, племянник Эдмонда, сын его старшего брата Эли и кинопродюсер, работавший над несколькими фильмами с Вуди Алленом. Президент Republic Дов Шлейн и Натан Хассон, заместитель председателя Republic, также входили в число попечителей синагоги. Уолтер Вайнер, один из самых доверенных советников Эдмонда, председатель совета директоров и главный операционный директор корпорации Republic of New York, входил в исполнительный комитет синагоги.
Но в судебных документах Эдмонд пытался утверждать, что у него не было подписанного контракта с Аттиа и что Аттиа выполнил только 10 процентов работы и требовал более 70 процентов оплаты - это утверждение Аттиа отверг. Аттиа утверждал, что Эдмонд оказывает на него давление по другим причинам. Помимо синагоги, Аттиа в то время занимался проектом в Израиле. Центр "Шалом" был крупнейшим объектом недвижимости в истории страны. Давид Азриэли, канадский архитектор и застройщик, нанявший Аттиа для работы над проектом, хотел разделить с ним заслуги в проектировании и якобы удерживал гонорар Аттиа до тех пор, пока тот не согласился. Аттиа начал арбитражное разбирательство в Израиле, чтобы получить причитающиеся ему 1,5 миллиона долларов. Но Аттиа тогда не знал, что банк Эдмонда в Израиле, Первый международный банк Израиля Лтд. (FIBI), участвовал в конкурсе на финансирование центра "Шалом". Согласно юридическим документам, "в ходе пятимесячных арбитражных слушаний стало ясно, что решение Сафры в январе 1993 года заставить Аттию уйти из проекта синагоги было попыткой оказать давление на Аттию, чтобы заставить его отказаться от борьбы с Азриэли, которая препятствовала шансам Азриэли (и FIBI) развивать очень прибыльный проект центра "Шалом"".
Эдмонд отверг все обвинения. Разъяренный и разочарованный Аттиа подал в суд на Эдмонда лично. "Я всегда отдавал вам все, что мог отдать - свой талант и свое время", - писал Аттиа в рукописном заявлении об увольнении от 15 января 1993 года, которое было представлено в качестве доказательства в суде. "Телефонный разговор, состоявшийся вчера вечером, заставил меня понять, что вы, к сожалению, видите наши отношения в ином свете". По словам Аттиа, за всю свою "преданность и самопожертвование" он получил "финансовое удушение, оскорбление и, более всего, недоверие".
Суд отклонил ходатайство Эдмонда о прекращении дела, и в итоге в октябре 1996 года иск был урегулирован во внесудебном порядке. Но трещины между Сафрасами и сефардской общиной уже начались. После женитьбы Эдмонда на Лили они всегда были на поверхности. Не только братья и сестры Эдмонда не одобряли Лили, но и многие представители сефардской общины, близкие к Эдмонду, были нетерпимы к его показной жене. В течение многих лет Эдмонд и его братья поддерживали сефардские организации и синагоги по всему миру. Но после его женитьбы на Лили она начала перенаправлять их пожертвования в другие благотворительные организации. Возможно, лидеры сефардской общины знали о том, что Лили не интересуется их делами, и поэтому относились к ней с ледяным безразличием. А возможно, ее просто не принимали из-за ашкеназского происхождения.