嘉庆三年，他的母亲冯氏去世后，丰绅殷德写了《自适吟》表达思念之情，其中不免提到对富贵生活的一种厌恶和对田园生活的无限憧憬：“人生贵子适，身外更何求？颇羡陆东美，翻思马少游。才宜置邱壑，福不类王侯，仆仆风尘里，真堪呼马牛”。
正在丰绅殷德在朝中的官职节节高升之际。不料，嘉庆四年风云突变。因父亲和牵连，丰绅殷德所袭公爵被降为伯爵，并被勒令“在家闲居，不许出外滋事”。不久，从和家内抄出正珠朝珠，又被革去伯爵，赏给散秩大臣衔，承袭三等轻车都尉世职。嘉庆七年三月，因川楚陕三省白莲教起义基本被平定，丰绅殷德被赏给民公品级，在散秩大臣上行走。
人走背运，喝口凉水也塞牙，自从父亲死后，丰绅殷德是处处小心，惟恐有人抓住把柄。嘉庆八年，已革长史奎福控告丰绅殷德演习武艺谋为不轨，并欲毒害公主；将侍妾带至坟园，于国服内生女等，经大学士董诰与留京王大臣审办，只有在国服内妾生一女属实，丰绅殷德随即被处以“在家圈禁，令其闭门思过”的处罚。
其实，自从丰绅殷德经历家庭变故后，名利心更被消磨殆尽，开始变得更为消沉。《逍遥吟》诗中写道：“亦莫恋此身，亦莫厌此身。此身何足恋，万劫烦恼 根。此身何足厌，一聚虚空尘。无恋亦无厌，始是逍遥人”。 和珅死后，丰绅殷德门前车马甚是稀落，加上身体多病，丰绅殷德开始沉湎于追求道家的长生术。昭《啸亭杂录》中就记载丰绅殷德“中年慕道，与方士辈讲养生术”。
嘉庆十一年正月，丰绅殷德被授予头等侍卫，在大门上行走的差使。四月，升任正白旗蒙古副都统，赏戴花翎。次年二月调任镶蓝旗满洲副都统，十二月赏给伯爵衔。十五年四月去世，嘉庆帝特派英和带侍卫十人前往祭奠，并赍赐陀罗经被，银五千两以资料理丧务，照公爵衔给予恤典。因无子，丰绅殷德的轻车都尉世职转由和琳之子丰绅伊绵承袭。
和珅的次子生于乾隆六十年，老来得子，他自然是喜不自胜，况且这个孩子“生而颖异，每逢啼哭，乳母抱赴屏壁间，指点字画，即转啼为笑”。因此，和珅非常喜爱，并将书香门的希望寄托在他身上。谁知此子不到两岁就夭折了，这给和家带来很大的打击。他因此还写了诗词来寄托自己的悲伤之情。其中在《七夕节得家信，闻幼儿病势增剧，不意竟以是日夭折，悼惜之余，感而成诗》写到：
河汉盈盈两泪倾，
都关离别恨难平。
双星既有夫妻爱，
应识人间父子情。
随后所做《忆悼亡儿绝句十首》中也有：
老来惜子俗皆然，半百生男 溺爱偏；
今竟无情抛我去，几回搔首问青天。
襁褓即知爱文章，痴心望尔继书香。
归家不忍看题壁，短幅长条一律藏。
学语先知父母呼，每逢退食足娱吾。
秋来归去无聊甚，触处伤 情痛切肤。
就连丰绅殷德听说弟弟去世的消息后，也十分悲痛。嘉庆元年他还写了《泸溪途次闻幼弟凶信挽词六首》纪念弟弟：
忆得临行见汝时，曾将果饵笑相嬉。
何期一月零三日，遂使千秋永别离。
记否亲承言笑时，曾云长幼太参差。
并期他日攻书侯，指谓吾堪作汝师。
尔我同生锦绣丛，君亲恩育报难穷。
似兹富贵遭夭折，岂若贫寒得寿终。
两载兄弟今永别，人间泉下路冥冥。
泪盈沧海千秋水，恨厌峦山万叠青。
由此可见，和珅次子的出生给和家带来的欢乐，以及夭折后给和家带来的失望和痛苦。这应该是和晚年受到的最严重的打击之一，同时也表现出他对子女的疼爱之情。
愿殉情的吴卿莲
和珅是乾隆身边的大红人，为了显示身份，身边自然奴仆成群，姬妾众多。他除结发妻子冯氏外，尚有爱妾多人，以致有清人说他“后房姬妾无数”。这在封建社会并不是大不了的事，不用担心因“包二奶”而丢官或被告发。加上和珅为了绵延香火，多娶妻妾多生子女也就有了更加理直气壮的理由。
他的许多小妾都是各级官员为了巴结他而主动献给他的，不仅如此，他竟然将出宫女子娶为次妻，甚至把别人遗留下来的小妾纳为己有，因此而受到许多人的非议。
妾是封建社会中地位卑下的一个阶层，是值得同情的社会牺牲品。她们一般与自己的男人并没有什么真感情，只是他们传宗接代的生育机器而已。但并非都是如此，当时的她们也有不少人与他们共同拥有的男人还颇有感情，以至于有些人还会为她们喜欢的男人们牺牲自己的性命。和、和琳兄弟就有这样的魅力。嘉庆元年，和琳死在镇压苗民起义的战场上，他的爱妾殷云卿即为他殉了葬，使和珅感叹不已。和珅被赐死后，他的不少爱妾也为他自尽了，其中就有吴卿莲。
吴卿莲本是原任甘肃布政使、后任浙江巡抚的王望的爱妾，由于能诗善画，言语乖巧，很受王望宠爱，特在杭州西湖边上修建了饰以宝玉的楼阁供其居住，称为迷楼。乾隆四十六年，甘肃冒领赈灾钱粮大案发生，王望和时任陕甘总督的勒尔谨等二十余人被处死，家庭财产被抄没，他的爱妾吴卿莲即被侍郎蒋锡所得。后来蒋锡为巴结和珅，忍痛割爱，把她奉献给了和珅。
和珅对吴卿莲一见钟情，十分喜爱。经常把她带在自己身边。甚至仿照王望的迷楼为她专门修建了池馆，吴卿莲也对和珅不嫌弃自己的出身而感激不尽。
嘉庆四年正月初八日，和珅被抄家，吴卿莲当时住在和海淀淑春园中，随后就被刑部和顺天府衙门的兵士看管了起来。吴卿莲在被软禁期间，回想起自己一生几度荣辱，几易其主，只有和珅真心关照他，和珅死后，自己再无挂念之人。于是，她在和珅死后的正月二十日午刻自缢身亡，临死前曾作绝句十章，叙述其一生悲苦心情。现保存于中国第一历史档案馆的《查抄和家产清单》以及邓之诚《古董琐记》卷5中：
其一：
？？？？自从孤翼叹无巢，绮梦尘缘一例抛。
？？？？惭愧窗前雪衣女，心经一卷已先交，
？？？？炉香瓶水小排当，高矗莲花别样妆。
？？？？自是妙严公主样，上砖步步礼空王。
？？？？记否园中布地金，萧萧紫竹早成林。
？？？？杨枝遍洒人间水，争拜慈航观世音。
？？？？几多朱户几禅关，解脱因缘去不还。
？？？？历尽娥眉多少劫，夕阳斜处到西山。
从诗中可以看出，她似有看破红尘，出家为尼之意。
其二：
晓粒惊落玉搔头，宛在湖边十二楼。
？？？？魂定暗伤楼外景，湖边无水不东流。
？？？？香稻入唇惊吐日，海珍到鼎厌尝时。
？？？？蛾眉屈指年多少，到处沧桑知不知。
？？？？缓歌慢舞画难图，月下楼台冷绣襦。
？？？？终夜相公看不足，朝天懒去倩人扶。
？？？？莲开并蒂岂前因，虚掷莺梭廿九春。
？？？？回首可怜歌舞地，两番俱是个中人。
？？？？最不分明月夜魂，何曾芳草怨王孙。
？？？？梁间燕子来还去，害杀儿家是戟门。
？？？？白云深处老亲寻，十五年前笑语温。
？？？？梦里轻舟无远近，一声款乃到吴门。
？？？？村姬欢笑不知贫，长袖轻裙带翠颦。
？？？？三十六年秦女恨，卿莲犹是浅尝人。
？？？？冷夜痴儿掩泪题，他年应变杜鹃啼，
？？？？啼时休向漳河畔，铜爵春深燕子栖。
？？？？钦封冠盖列星辰，幽时传闻进贵臣。
？？？？今日门前何寂寂，方知人语世难真。
？？？？一朝能悔郎君才，强项雄心愧夜台。
？？？？流水落花春去也，伊周事业空徘徊。
诗中详细记录了获知和珅被抄家后的惊慌之情。正月初八日早起后，吴卿莲正在精心整理头发，突然间听说和家被籍没，惊吓之下，梳头的梳子也掉在地上；有正在吃饭的家人竟因惊吓而把饭吐了出来。恰似当年王望家被查封时的一幕——厨师刚刚送进做好的燕窝汤，满屋都是，但是大家已经吃得多了，不认为是好东西，所以多放在茶几上。前来抄家的兵役看见后，纷纷大嚼， 称之为洋粉。吴卿莲两次经历同样的事，深深感叹自己的命运悲苦，顿觉世道的变化无常，人生的变幻莫测。不由心生感叹，随即选择了自缢而亡。
无论如何，吴卿莲算是用行动表达了对和珅的衷心，不似那些一哄而散的人那般不近人情。
善持家的长二姑
和珅另有一个有名的宠妾名叫长二姑。长二姑在和众多的妻妾中应该是最受信任的一个。她善于理财，她常年负责和家的财务，成为和家的财务总监督，加上很有主见，和珅遇到一些棘手的事情时总喜欢与她商量商量，因而在和家最有权势，和府上下和各级官员都称她“二夫人”。