还数次冒着危险，偷偷地去祭先帝的陵墓，在那里洒一鞠辛酸的“遗民”沮，并且在诗歌中表示，自己要“死将为厉鬼，生且为顽民。”
阎尔梅不仅如是说，也真正地做到了这一点。
在他失望地回归故里后，他的一位故友胡谦光正好在沛县作县令，他仰慕阎尔梅的文名，致书阎尔梅，企图劝说他入仕为官。
阎尔梅坚决地拒绝了这一要求，并不惜得罪权贵，割袍断交，并作了绝交诗一首，表明自己的志向和态度。
其诗曰：
绝贼臣胡谦光
贼臣不自量，称予是故人。敢以书招予，冀予与同坐。
一笑置弗答，萧然湖水滨。湖水经霜碧，树光翠初年。
妻子甘作苦，昏晓役舂薪。国家有兴废，吾道有诎申。
委蛇听大命，柔气时转新。生死非我虞，但虞辱此身。
所以，当阎尔梅看到了钱谦益在信中暗示他们要商谈如何借用所谓的汉唐集团的实力来恢复我大明天下的时候，义无反顾地投奔来了。
只要是能反抗鞑虏的事情，他都要去做；只要有相同想法的人，他都要去亲近。
等他到了钱谦益专门为他们准备的招待所后，他才发现，已经来了不少的贤良。
其中就有两个他早已经耳闻，但是一直没有见过面的人物：
归庄与万年少。