Одним из главных источников «невыразимого, бесконечного» страдания являлось отрицательное отношение к Достоевскому со стороны каторжников.
Каторжники видели в Достоевском прежде всего дворянина, представителя чуждого, враждебного им класса; они ненавидели его.
В «Записках из мертвого дома» он часто жалуется на их ненависть.
«Ненависть, которую я, в качестве дворянина, испытывал постоянно в продолжение первых лет от арестантов, становилась для меня невыносимой, отравляла всю жизнь мою ядом. В эти первые годы я часто уходил, без всякой болезни, лежать в госпиталь, единственно для того, чтобы не быть в остроге, чтобы только избавиться от этой упорной, ничем не смиряемой всеобщей ненависти. «Вы, железные носы, вы нас заклевали!» – говорили нам арестанты, и как я завидовал, бывало, простонародью, приходившему в острог! Те сразу делались своими товарищами».
И, встреченный ненавистью арестантов, Достоевский в течение всего периода пребывания в остроге чувствовал себя одиноким: «Помню, что во все это время, несмотря на сотни товарищей, я был в страшном уединении».
Расширив круг своих наблюдений далеко за пределы внутреннего мира, Достоевский тем не менее остался тем, чем был: он продолжал жить обособленной рефлективной жизнью; по-прежнему он усиленно работает над самим собой, тщательно анализирует свой внутренний мир. Полученные новые впечатления и наблюдения служат ему лишь материалом для переустройства этого внутреннего мира. «Одинокий душевно, я пересматривал всю прошлую жизнь мою, перебирал все до последних мелочей; вдумывался в мое прошедшее, судил себя один неумолимо и строго и даже в иной час благословлял судьбу за то, что она послала мне это уединение».
Одним словом, «внутренняя работа кипела»… А одновременно с ходом внутреннего перерождения росла и развивалась старинная душевная болезнь.
«Я вышел из каторги решительно больной»… «Вообще каторга много вывела из меня и много привила ко мне. Я, например, уже писал тебе о моей болезни (обращается он к брату). Странные припадки, похожие на падучую, и однако ж, не падучая»…