Не без труда Эдгар По нашел наконец скудную работу в «Saturday Museum» («Субботний Музей»). Между тем гениальные сказки и новеллы поэта, оплачиваемые ничтожным гонораром, два-три доллара за страницу, печатались в мелких американских журналах, в том числе «Элеонора», «Колодец и Маятник», «Тайна Мари Роже». Только «Золотой Жук», рукопись которого долго валялась в редакции «Журнала Греэма», доставил автору премию в сто долларов на конкурсе, который был организован захудалым изданием «The Dollar Newspaper» («Временник в один доллар»). Рассказ был затем перепечатан несчетное число раз, но не принес автору более ничего: законы о печати были тогда в Штатах еще несовершенны. Несколько больший заработок давали публичные лекции, и Эдгар По все чаще стал выступать лектором, пользуясь между прочим кафедрой для полемики со своими врагами, особенно с Гризвольдом.
Так просуществовал Эдгар По с семьей годы 1841–1843, живя в маленьком домишке, в предместье Филадельфии. Но тяжелое испытание подстерегало поэта. У Виргинии, после пения, лопнул кровеносный сосуд. Несколько дней она была при смерти; потом оправилась, но с тех пор ее жизнь стала медленным умиранием. Кровотечения из горла повторялись и каждый раз грозили смертью. Эдгар По дошел до пределов отчаяния. Он утратил способность работать систематически. Рядом с вином, он стал прибегать к опию. Для жены и ее матери то был ужас; для самого Эдгара — стыд, так как он и сам считал свою болезнь пороком; для литературных врагов — предлог для неистовых обвинений и коварных соболезнований. К 1844 году Эдгар По с семьей снова дошел до нищеты; они голодали. Положение было таково, что Эдгар По написал письмо Гризвольду, прося ссудить пять долларов.