На этом Коллинз заканчивает свой рассказ. Эти события, говорит он юному Калебу, так повлияли на Фокленда, что он резко изменился: перестал бывать в обществе, сделался суровым отшельником. Несмотря на доброту к окружающим, он всегда холоден и сдержан, а обычное для него мрачное расположение духа временами сменяется припадками ярости, и тогда он похож на безумца.
Рассказ управляющего производит столь сильное впечатление на одаренного пылким воображением юношу, что он постоянно размышляет над историей своего хозяина. Тщательно анализируя все ее детали, он приходит к выводу, что Хоукинс не мог быть убийцей Тиррела. Случайно обнаруженное Калебом письмо Хоукинса к Фок-ленду, который симпатизировал бедному арендатору и пытался спасти его от преследований Тиррела, превращает догадки в твердую уверенность. Неужели убийца — Фокленд?
Калеб начинает наблюдать за ним, подмечая его малейшие душевные движения. Разговаривая с Фоклендом на отвлеченные темы, юноша старается направить беседу в нужное ему русло в надежде на то, что фокленд выдаст себя неосторожным словом или жестом. Желание во что бы то ни стало узнать тайну своего хозяина превращается у Калеба в настоящую манию, он теряет всякую осторожность и почти в открытую ведет со своим хозяином опасную игру: тонко продуманными вопросами и якобы случайными намеками он доводит Фокленда чуть ли не до безумия.
Наконец Фокленд признается Калебу, что он, Фокленд, подлинный убийца Тиррела, стал причиной гибели невинно осужденных Хоукинсов. Но Фокленд не сломлен поражением. Он предупреждает юношу, что его ждет расплата за его ненасытное любопытство: он не прогонит его со службы, но всегда будет ненавидеть его, а если Кадеб поделится с кем-нибудь раскрытой тайной, то пусть пеняет на себя.
Юноша понимает, что фактически стал пленником Фокленда. За время своей службы у него Калеб духовно вырос и сформировался как личность, хотя и дорогой ценой. Занятый постоянной слежкой и анализом поведения Фокленда, юноша научился владеть своими чувствами и волей, ум его стал острым и проницательным, но он полностью утратил непринужденность и жизнерадостность юности. Преклоняясь перед высокими достоинствами Фокленда, характер и образ мыслей которого он досконально изучил, Калеб сознает, насколько опасен может быть человек, которого вынудили признаться в совершенном преступлении.
Калеб и Фокленд словно поменялись местами. Теперь Фокленд ревниво следит за каждым шагом Калеба, и того начинает тяготить отсутствие свободы. В поместье приезжает с визитом Валентин Форстер, старший брат Фокденда по матери. Форстер симпатизирует юноше, и Калеб намекает ему на то, что тяготится службой у своего хозяина.
Юноша просит у Форстера заступничества на случай преследований со стороны Фокленда. Но тот догадывается о том, что юноша хочет ускользнуть из-под его власти, и требует, чтобы Калеб прекратил всякое общение с Форстером. Он подкрепляет свое требование угрозами, и Калеб решается бежать. Форстер посылает ему вслед слугу с письмом, в котором убеждает его вернуться в поместье брата. Калеб возвращается, но коварный Фокленд обвиняет его в' том, что он обокрал его на крупную сумму денег. В присутствии Форстера и слуг Фокленд приводит подложные доказательства виновности Кадеба, и юношу отвозят в тюрьму. Он пытается бежать, но только вторая попытка возвращает ему свободу.
Калеб едва не гибнет от рук разбойников, но их предводитель, Раймонд, которому не чуждо благородство, спасает его и берет под свою защиту. Злобного и алчного Джайнса, который ограбил и ранил беззащитного Кадеба, Раймонд изгоняет из шайки. Юноша живет среди разбойников в густой чаще леса, в старых развалинах, где хозяйство ведет ужасная старуха, которую местные жители боятся и считают ведьмой. Она ненавидит Калеба, так как из-за него прогнали Джайнса, который пользовался ее расположением. Юноша не участвует в набегах шайки, напротив, он увещевает разбойников и их главаря бросить воровство и ступить на честный путь.
Тем временем в округе распространяют листки с описанием внешности опасного преступника Кадеба Вильямса: за его поимку назначена награда в сто гиней. Юноша догадывается, что старуха, которая уже покушалась на его жизнь, хочет выдать его властям, и покидает шайку. Он переодевается нищим и пытается отплыть в Ирландию, но его хватают двое сыщиков, по ошибке приняв за одного из мошенников, ограбивших почту, и Калеб чуть было снова не попадает в тюрьму.