纪晓岚之所以能让我们听过，主要还是源于电视剧《铁齿铜牙纪晓岚》，在电视剧中纪晓岚的形象深入人心，他清正廉洁，颇有才学，跟皇帝关系很好，屡次智斗贪官和珅，而且在电视机中他不好女色，你看杜小月作为红颜知己在他身边那么久，他都没动过歪心思，不过在历史上真正的纪晓岚，并非不近女色的。
根据史料记载，纪晓岚有一方正室妻子，名叫马月芳，他还有三房小妾，分别是文鸾、郭彩符、沈明玕，不过也有说他有六房小妾，不管他有几房，总而言之纪晓岚并非想电视剧中那样，纪晓岚找的女朋友，基本都不看长相，他看中心灵上的交融，所以他的妻妾都颇具文采，能跟他畅谈诗词歌赋，聊文学等等。
有老婆肯定就会有儿子，纪晓岚的这些老婆们，一共给他生了四个儿子三个女儿，古代女子的地位比较低下，所以她女儿的名字并没有记载，他的四个儿子分别为大儿子纪汝佶、二儿子纪汝传、三儿子纪汝似、四儿子纪汝亿。
纪晓岚在当时可谓大名鼎鼎，倒并不是他在朝为官取得什么政绩，而是他的文学造诣令人敬仰，清朝的《四库全书》就是纪晓岚做总编修订的，他还写了许多作品传世，但他的四个儿子们，却并没有他的成就了。
纪晓岚大儿子纪汝佶，他从小聪慧灵敏，据说才五岁便能吟诗作画了，纪晓岚对这个儿子非常喜爱，20岁时他还考中了进士，可惜不知道怎么的，纪汝佶突然迷上了《聊斋志异》，他深陷里面的妖狐鬼怪故事，最终不能自拔，最终发癫发狂去世，看来这些妖魔鬼怪的书，真是害人不浅啊。
纪晓岚二儿子纪汝传跟他哥一样，也是很聪明，还担任过朝廷的官，可惜不明不白的英年早逝；三儿子纪汝似一生官运不济，只能勉强度日；四儿子纪汝亿是纪晓岚64岁高龄所生，真是老来得子啊，虽然我们佩服纪晓岚的能力，但纪汝亿在史料中几乎记载，或是夭折了，或是一生平淡无奇。
纪晓岚的儿子们都非常平凡，家世是影响后代的主要因素，所以纪晓岚的孙子辈们，也没什么杰出人物，只有个叫纪树馨的孙子，还勉强可以，他把爷爷的许多文章和笔记整理出来而已，到曾孙这一代也同样如此，正应了那句老话：富不过三代，从纪晓岚这一代开始，后面就不难振雄风，不过到了第六、第七代时，纪晓岚家族又冒出不少牛人。
纪晓岚的第六代传人，已经到了20世纪初，中国首位女律师纪清漪，就是纪晓岚第六人传人，还有著名画家纪清佑、著名作家纪清侁等等，这三人都是纪晓岚的后裔，都是比较著名的人物。
不过纪晓岚的后裔中，至今做大官的仍旧没有，在文学界引起轰动的人物也寥寥无几，总而言之比起纪晓岚而言，还是有所不及的。
