Это византийское завоевание в очередной раз настраивает венецианцев против генуэзцев, а что касается купцов, кажется, что распри между этими двумя крупными «флангами» за право владения рынками, дорогами и землями Востока будут продолжаться бесконечно. Конфликт, приглушаемый долгое время, разразился в великий день, за несколько лет до появления Святого Иоанна из Акры (Сен-Жан д’Акр). Он возник из-за спора за обладание обширной территории конфессии, на которой находилась маленькая церковь Санта Саба, и за право контроля над портом. 24 июня 1258 года два флота столкнулись в нескольких лье от города: во время ожесточенной и кровавой битвы, завершившейся полной победой венецианцев, 25 генуэзских галер были взяты на абордаж, другие спаслись бегством; в самой Акре недвижимость генуэзцев, их дома и магазины были разорены. Ссора, которая без конца возобновляется в течение более ста лет на всем Востоке, на берегах Сирии и Анатолии и во всех прибрежных районах островов, даже в Адриатике, и которая повторится еще не раз, повлияет в будущем на судьбу семьи Поло, и особенно — молодого Марко.
В Константинополе Венеция все свои силы, средства и имеющиеся у нее ресурсы, свое золото, свое дипломатическое искусство — отдает на службу латинянам. Это, в частности: флот под командованием Марко Градениго; заем в 3 000 гиперпер золотом; заключение соглашения между латинскими, франкскими и венецианскими принцами, Мореей и архипелагом. Но династия Палеологов уже держит значительный гарнизон на Балканах. Они продвигаются в Трас с 800 всадниками в сопровождении огромного количества пехоты — добровольцев, привлеченных возможностью грабежа. Перед триумфальным входом нового греческого императора 26 июля 1261 года в течение нескольких дней происходили убийства, пожары, систематический грабеж магазинов. Бодуэн, франкский император, латинский патриарх Джустиниани и венецианский подеста Градениго бегут вместе на корабле. Венецианцы прячутся в городе, а моряки и солдаты-пехотинцы венецианского флота, прибывшего слишком поздно, беспомощные и испуганные, созерцают высокие языки пламени, пожирающие здания, магазины, церкви и дворцы их гордой колонии, в которой они когда-то были полновластными хозяевами.
Таков был конец этой латинской империи, с трудом завоеванной, но оказавшейся не в состоянии заставить стремящихся к независимости греков признать себя; она отступила перед силой их сопротивления, их верой. Окончилось двухвековое господство венецианцев в Константинополе. Больше они — не привилегированные союзники, они не способны плести интриги, влиять и управлять. Они имеют статус бесправных иностранцев, подвергнуты всем превратностям судьбы, служат мишенью для унижений и застарелой вражды, питаемой злыми воспоминаниями. Положение, конечно же, очень неуютное. Оно порождало проблемы, связанные с приспособлением к новой неприятной обстановке, или заставляло покинуть насиженные места.
Некоторые семьи возвращаются в Венецию, устраиваются в домах родственников и оттуда продолжают управлять своими делами на Востоке с помощью посредников: капитанов кораблей, мелких уполномоченных, посыльных. Старшие дети вступают в Большой Совет: пример ассимиляции в метрополии. Общество сейчас более заботится о том, чтобы увеличить свои капиталы на местах, вкладывая деньги также в покупку землевладений побережья. Таким образом, Венеция с 1260 года направляет свою деятельность и амбиции в другую сторону более активно, чем когда-либо. На Западе это, с одной стороны, торговля с Германией, ее конвоем галер, и с другой стороны — с Фландрией и Англией. В континентальной политике предпринимаются тонкие ходы.
Венеция берет себе на службу наемные войска и более активно участвует в делах Европы. Она насаждает посольства во множестве стран, в том числе на Востоке, и при этом полностью отказывается принимать участие в судьбе Византии. Там еще сохраняется венецианское сообщество, но уже иное, чем прежде, в некотором роде униженное, лишенное своих великих имен, потерявшее значительную часть былого могущества. Прошло время венецианских подеста из Константинополя и из других поселений, когда династии архипелага могли навязать свою волю островам залива и соперничать с дожем.