Часами мечтая о любви и прекрасных незнакомках, отвечающих взаимностью, он в присутствии не воображаемых, а живых женщин смущался, робел, становился неловким и смешным. А его попытки физической близости с ними неизменно заканчивались полным фиаско.
Между тем успех «Бедных людей» раскрыл перед Достоевским двери петербургских салонов. Тогда он и познакомился в доме известного литератора Панаева с его молодой женой Авдотьей Яковлевной и сразу же увлекся 22-летней кокетливой брюнеткой с безукоризненными чертами красивого лица. Об этом Достоевский сам рассказал брату через три месяца после встречи с ней: «Я был влюблен не на шутку в Панаеву, теперь проходит…» Эта первая влюбленность была и мучительна, и унизительна. С самого начала он понял, что на взаимность ему рассчитывать невозможно и что его чувство обречено на медленное увядание. Любовь к Панаевой Достоевский переживал тем мучительнее, что в то время она была, вероятно, единственной женщиной, которая так сильно его возбудила. В его переписке тех лет нет никаких других женских имен, кроме Панаевой.
На основании этого все же не следует делать вывод, что 25-летний Достоевский вообще не имел физической близости с женщинами. В той среде, где он жил — а он, по собственному признанию, частенько участвовал в товарищеских пирушках, — шумные вечера обычно завершались посещениями публичных домов, и трудно поверить, что поручик Достоевский не бывал в них. Сомнительно также, чтобы во время блужданий по трактирам большого города он не соприкасался с проститутками. Федор Михайлович, должно быть, хорошо знал женщин легкого поведения, достаточно прочесть такие его произведения, как «Хозяйка», «Неточка Незванова», «Двойник», чтобы убедиться в разнообразии личного эротического опыта писателя.
Впрочем, именно эти произведения, появившиеся после «Бедных людей», вызвали недоумение и нещадную критику со стороны прежних почитателей Достоевского. Это и побудило обидчивого автора отойти от литературного общества и примкнуть в 1847 г. к революционному кружку Петрашевского. Восхищенный их идеями, Федор Михайлович даже пытался организовать тайную типографию для печатания литературы и прокламаций антиправительственного содержания.
23 апреля 1849 г. Достоевский был арестован по делу петрашевцев и помещен в Алексеевский равелин Петропавловской крепости. 22 декабря 1849 г. в числе других петрашевцев он был выведен на Семеновский плац в Петербурге, где обвиняемым зачитали смертный приговор. Лишь после того, как первой группе осужденных завязали глаза и приготовили к расстрелу, было объявлено, что казнь заменяется каторгой с последующей службой в армии рядовыми.