В 1791 году, в возрасте одиннадцати лет, Ивана де Витта записали в лейб-гвардии Конный полк. Первого января 1800 года в чине ротмистра он был переведен в Кавалергардский полк, а год спустя получил чин полковника и стал кавалером одного из высших российских орденов — ордена Святого Иоанна Иерусалимского.
С восшествием на престол императора Александра I полковник Иван де Витт попадает в штаб гвардейских частей империи. В обязанности молодого и хорошо образованного юноши с классической южноевропейской внешностью входил сбор важной информации обо всех европейских армиях, изучение и анализ уставов, ну и, конечно, политической, экономической и социальной обстановки.
Ивану де Витту довелось лично участвовать в сражениях. Так, при Аустерлице он был тяжело ранен в ногу и продолжительное время лечился. Во время переговоров в Тильзите между Александром I и Наполеоном Бонапартом де Витт, находясь в свите российского императора, выполнял функции доверенного консультанта Его Императорского Величества. Перспектива великолепной придворной карьеры виделась столь явственно, но. По салонам поползли слухи о каких-то «недостойных офицера» поступках. Шептались о дуэлях де Витта, о векселях на огромные суммы, об обманутых девицах из знатных семейств, имен которых никто не мог припомнить. Так или иначе, но красавец не просто с треском вылетает из армии — ему было «строжайше» предписано «покинуть российскую службу без мундира»! Большего унижения и позора для представителя военно-аристократической среды того времени сложно было придумать.
Де Витт переезжает в Польшу, а затем во Францию, где записывается волонтером в армию французского императора. Бывшие сослуживцы и друзья, понятно, были возмущены таким поступком и открыто называли де Витта изменником Отечества, предателем, бесчестным человеком, не достойным звания дворянина. Императорский двор все это время хранил молчание.
Пребывая в Париже, граф де Витт, благодаря широким семейным связям, а больше всего — известности маман, стал завсегдатаем местных великосветских салонов, где благосклонно принимали «сына европейских народов», которому «посчастливилось вырваться из лап русского медведя». Де Витт близко познакомился с сестрой Наполеона Полиной Боргезе, со многими влиятельными лицами при французском дворе, с чиновниками французских министерств, в том числе с секретарем французского Военного министерства, который через несколько лет будет разоблачен как русский шпион и агент военного атташе России А. И. Чернышёва.
Во французской армии де Витт отличился в нескольких сражениях с австрийцами и обратил на себя внимание вначале маршала Мюрата, а позднее и самого Наполеона Бонапарта. Детально изучив оперативное досье графа, сверив его с данными, предоставленными французскими секретными службами, император дает де Витту ряд секретных поручений, с которыми граф прекрасно справляется. Император назначает де Витта одним из своих секретных резидентов, акцентируя внимание «на делах герцогства Польского». Чуть позже Наполеон оформляет де Витта офицером по особым поручениям при своем походном штабе.
В 1809 году де Витт вступил в брак с польской аристократкой, дочерью князя Каспера Любомирского Юзефой (Жозефиной) Любомирской. Она была свояченицей Марии Валевской, в которую был влюблен Наполеон. Через графа император ведет свою переписку с прекрасной полячкой (которая родит ему двух сыновей) и продолжает использовать его в различных секретных операциях.
В 1811 году Наполеон, неожиданно для многих во Франции, официально назначает де Витта своим «личным тайным агентом в герцогстве Варшавском». Это был очень высокий пост в системе французских политических спецслужб того времени. Здесь стоит напомнить, что во всех французских документах кампания 1812 года именовалась «Второй польский поход», основной задачей которого декларировалось «окончательное освобождение Царства Польского от влияния российского императора». Находясь на этом посту более года, граф де Витт непрерывно письменно общался с самим Наполеоном, с министром иностранных дел Франции герцогом Талейраном де Перигор и со множеством других важных лиц Франции.