Федор пристрастился к чтению сызмальства. Книги в семействе Достоевских пользовались уважением. Мария Федоровна зачитывалась романами. Едва только дети подросли, в свободные вечера, когда Михаилу Андреевичу не приходилось заполнять «скорбные листы» — истории болезни, — он брал книгу и, сменяемый Марией Федоровной, читал детям вслух. Любимым писателем был Карамзин. Михаил Андреевич предпочитал его «Историю государства Российского», Мария Федоровна — чувствительные повести: «Бедную Лизу», «Наталью, боярскую дочь» и другие. Вскоре Михаил и Федор тоже начали читать в очередь с родителями.
Так прочитаны были «Описание жизни Ломоносова» Ксенофонта Полевого, оды Державина, баллады Жуковского, «Юрий Милославский» Загоскина, «Ледяной дом» Лажечникова, «Семейство Холмских» Бегичева, «Сказки казака Луганского», сочинение Даля. Последние книги были новинками. Михаил Андреевич сам покупал их и приносил детям. Когда Федор подрос, он полюбил Вальтера Скотта, исторические сочинения и романы. Но всему этому и он, и Михаил предпочитали стихи Пушкина. Многое из Пушкина знали наизусть и горячо отстаивали его в спорах с родителями, которые высшими авторитетами считали Карамзина, Державина, Жуковского, а к Пушкину относились с некоторым сомнением. По их мнению, он был еще молод и недостаточно серьезен.
Как-то Федор и Михаил, чтобы доказать превосходство своего любимца, выучили наизусть и прочитали родителям один — «Песнь о вещем Олеге» Пушкина, другой — балладу Жуковского «Граф Габсбургский». Родителей это не переубедило, хотя Федор из себя выходил, доказывая достоинства «Вещего Олега».
Чтение было любимым занятием Федора и тогда, когда он учился в пансионе Чермака. «Мне потом не раз случалось встречаться с лицами, вышедшими из пансиона Чермака, где получил образование Достоевский, все отличались замечательною литературною подготовкой и начитанностью», — говорил Григорович.
И теперь в училище Федор не расставался с книгой, предпочитая ее всему — играм в городки, «загонки», «бары», танцам и другим развлечениям.
Видя столь странное поведение, товарищи поначалу смеялись над ним, называли чудаком, монахом, давали разные прозвища.
А потом пригляделись и оставили в покое. Нашлись и такие, которые полюбили его, прониклись к нему уважением, захотели сблизиться. В сыне скромного штаб-лекаря было чрезвычайно развито чувство собственного достоинства. Не он искал друзей — его дружбы искали. Достоевского постоянно видели с воспитанником старшего класса Бережецким. Этот юноша из состоятельной семьи, любивший пофрантить, щеголявший часами, бриллиантовыми кольцами, располагавший всегда деньгами, ловил каждое слово Федора, относился к нему как ученик к учителю. Когда другие играли на плацу или танцевали, Достоевский и Бережецкий гуляли вдвоем по камерам — то есть спальням — и беседовали. Бывал с ними и Григорович. И еще двое кондукторов присоединились к их кружку — Витковский и Бекетов. «…Я не ограничился привязанностью к Достоевскому, но совершенно подчинился его влиянию, — вспоминал Григорович. — Оно, надо сказать, было для меня в то время в высшей степени благотворно. Достоевский во всех отношениях был выше меня по развитости; его начитанность изумляла меня. То, что сообщал он о сочинениях писателей, имя которых я никогда не слыхал, было для меня откровением. До него я и большинство остальных наших товарищей читали специальные учебники и лекции, и не только потому, что посторонние книги запрещалось носить в училище, но и вследствие общего равнодушия к литературе». А Федор жил литературой, питался ею.