过了两三天，报上的报道也许因为缺少了有关富子的材料，开始探究似的重复刊登起老人的经历、夫人的品性——全是那些二十年前某报社撰写过的事情。老人每天早晨读着这些荒谬的报道，不由地回想起过去的事情，同时也想到夫人今日的不检点……充满了一种体面丧失殆尽的愤懑之情。
二十年前，自己还是个像屋里墙上挂着的肖像那么白皙、漂亮的青年，阿缟是个没有任何亲属、无依无靠的长崎艺伎。她的美丽的姿色被传教士B看上，使她在除了B本人之外别人全然不知的秘密情况下享受起荣华富贵来。不久，她就开始抱怨，急切地要与自己建立不正当的关系。在那位传教士死后，按照他的遗嘱，阿缟得到了令人惊异的巨额遗产的一半——即捐赠给英国孤儿院之后剩下的那一半，按照她的愿望，他带着不安的心情终于完成了两人的婚事，所有这一切，都历历在目地浮在眼前。接着，他们就遭到了整个社会的唾弃，至今仍然无法在公开场合露面活动。他那长达二十年之久的苦闷——尽管握有可轻而易举地开展引人注目的活动的财力，却不得不压下陡然而增的强烈的功名心，蜷缩在社会之外的角落里——这是何等难堪的痛苦；况且，自己的过失还殃及到女儿，竟把她造就成如此乖僻的女人，今后，恐怕连自己由衷的忏悔也不会被社会承认，会再次传出毫无根据的流言，这是多么的悲哀。如今，人们最后可图安逸的家庭和睦、自己老后的唯一寄托也给毁了，这又是多么严厉的惩罚！自己的妻子犯了通奸罪还在狂喜。哎，自己由于渴望富贵，用不正当的手段得到了财富，这一时之过，竟得到了如此可怖、残酷的惩罚，这又怎么可能料到！老人的眼睛不时被泪水浸湿，那些现实生活中的希望之影全都被无情地剥夺消失了，一种冷冰冰的死的企望在心中萌发、陡增。老人长期做外国人的翻译，对上帝说不上不信，不过，他成为信徒主要是把它当做一种交际术，目的是取得外国人的信任，所以，他并不甘心把自己这悲哀的命运任上帝去摆布。不久，报纸上的报道又以探究夫人不检点行为的笔调写来，老人再也沉不住气了。