钱谦益到达金华后，马进宝在听了他的复明之意后，语重心长地劝说道：“识时务者为俊杰，此时造反不是拿鸡蛋碰石头？赶快回去读你的书吧。”
任凭钱谦益怎么说马进宝也毫不动心。无奈，钱谦益只得无功而返。然而他一回到家就碰上了一桩极为不幸的事情，10月里一个狂风呼啸的夜晚，绛云楼不慎起火，几万卷藏书和一大批古玩珍好顿时变成了烟灰。
这件事使钱氏夫妇无论在心理上还是经济上都受到了沉重的打击。但他们并没有就此停止复明活动，这个时候的钱氏夫妇已经从当年的言情儿女变成了复国英雄。
顺治12年(公元1655年)冬到第二年的春天，钱谦益在柳如是的策动下，又拖着老迈之身，以治病为名，活动于南京一带，与有志复明之士来往密切，实际上是为郑成功进攻南京作准备，谋取驻守南京一带的门生故吏的支持。
正是由于钱谦益晚年为了复明运动不遗余力地频频奔走，柳如是也基本上谅解了钱谦益在“乙酉之变”中的变节行为。顺治18年(公元1661年)，钱谦益80大寿时，柳如是特地摘了一颗红豆送给丈夫，蕴涵着红豆相思之意，表达了他们的爱情虽老弥新，同时，柳如是又在后园用菜籽播种了一个寿字，旁边再播上麦子。等到菜籽开花，麦苗青青的时候，钱谦益登楼一望，黄灿灿的寿字夹在绿油油的麦苗之中，禁不住心都醉了。