当梁鸿先生只是一个名好人的时候，就时不时有人来打扰他，向他请教学问，这在梁鸿先生所能忍受的范围之内。当梁鸿先生家里又多了一个名丑女的时候，梁鸿先生家遂成了菜市场，来梁家串门的人络绎不绝，男的找梁鸿先生，女的找孟光女士。找梁鸿先生大都请教学问，找孟光女士干什么呢？唠嗑！这些良家妇女，向孟光女士诉苦，抱怨自己的老公如何如何，抱怨自己的孩子如何如何，于是向孟光女士请教相夫教子的经验。
梁鸿先生终于受不了这么多的喧嚣了，他决定离开家乡，重新找一个安静的地方隐居。但问题出现了，自己深爱的也深爱自己的老婆愿不愿意离开这里呢？
怀着这样的忧虑，梁鸿先生一直不忍心开口向孟光女士提出离开家乡的要求，但孟光女士是何等体贴心细的人，她很快就察觉到了梁鸿先生的心思，于是繁星当空的夜晚，孟光女士依偎在梁鸿先生的怀抱，一边数着星星，一边对梁鸿先生柔情似水的说："亲爱的，我们离开这里吧。这里太吵了，我知道你不喜欢。"梁鸿先生问曰："如果离开这里的话，我们面临的将是非常辛苦的生活，也许我们穿不暖吃不饱，你愿意吗？"孟光女士坚定的说："愿意！只要有你在去哪里都愿意。天涯海角，哪怕上刀山下火海我都愿意。"还能说什么呢？梁鸿先生只能紧紧的把孟光女士搂在怀里，来表示他说不出口的爱意和感激之情。
就这样，第二天天还没有亮，梁鸿先生和孟光女士悄悄的离开了扶风县。
他们去哪了呢？他们去了霸陵，长安的郊区，在一座山脚下，依靠当地人的帮助，他们搭建了一座简易的木头房子，这座木头房子就是他们的家，就是他们爱的港湾了。他们在山谷中开垦了一块荒地，种下了小麦、高粱等农作物以及一些蔬菜。白天，他们一起劳作；晚上，梁鸿先生看看书，写写文章，作作画，也常常拿出七弦琴为孟光女士弹奏美妙的音乐，孟光女士呢，一边听着琴声，一边穿针引线，为梁鸿先生绣鞋，每当这个时候，孟光女士都会感到自己是这个世界上最幸福的女人。
人怕出名猪怕壮，怕打扰，怕跟踪，怕窥视，这也许是名人最烦恼的事情，可见名人不是那么好当的，你要有比普通人强数十倍的心理素质。名人跑到哪里都是名人，这不，梁鸿先生和孟光女士逍遥自在的日子才过了不到两年，他们的行踪又被发现了，清静的日子又没得过了，怎么办呢？逃吧！
于是他们决定离开人口稠密的关中，去更远的地方，他们决定去关中。
在经过洛阳的时候，梁鸿先生不小心做了一件小事，这件小事差点要了他的性命。
他写了一首打油诗，他为啥要写这首打油诗？因为他对刚刚建立起来的东汉王朝十分不满，洛阳城的老百姓过着猪狗不如的生活，但那些统治者却不管老百姓的死活，住在豪华的宫殿里过着如猪一般的生活。于是，他写下了这首叫《五噫歌》的打油诗：
登上北邙山啊，噫！
看看皇帝家啊，噫！
宫殿多宏大啊，噫！
人民的苦难啊，噫！
永远无尽头啊，噫！
从文学角度来讲，这首诗没啥水平，但它却真实的反映了当时洛阳城的状况，更要紧的是它还讽刺了当今的皇上--东汉王朝第三任皇帝汉章帝刘炟先生。刘炟先生也不知道啥时候知道了这首打油诗，他阁下的心胸可没有他爷爷刘秀先生那么宽广，他气得跳脚，怒曰："快快把那个叫梁鸿的家伙抓来，我要亲自审问他。我爷爷打下的江山，我吃好点，住好的关他鸟事？"唉，这下可苦了这对流浪夫妻。他们不得不隐姓埋名，装扮成农夫模样，一路上颠沛流离，逃离了洛阳，逃到了江南。过了些日子，刘炟先生气消了，突然发现梁鸿先生是一个有才华的人，于是向地方官吏下达命令，如有看到梁鸿先生，请把他送到朝廷，我要给他大官做。
而此时的梁鸿先生已经客居在一个叫皋伯通先生的家里。刚开始的时候，皋伯通先生并不知道梁鸿先生是啥人物，只把他当一般的雇工对待，给他分派的任务是舂米。为了生计，梁鸿先生毫无怨言，只是觉得对不住孟光女士。当孟光女士比他想象的要坚强得多，无论遇到什么情况，孟光女士对他的爱对他的体贴从来不曾改变。在寄人篱下的日子里，孟光女士依然保留着举案齐眉的习惯，这一幕恰巧被皋伯通看见了，他非常震惊："这梁鸿到底是啥样的人？他的老婆竟然如此对他？"又想到自己的老婆，一对比，简直就是一个在天，一个在地。
这时候，皋伯通先生又听到了当今皇帝正在寻找梁鸿先生并要委以重任的消息，虽然他还是不知道梁鸿先生到底是个啥样的人物，但他确定梁鸿先生不是一般的人，于是开始对他刮目相看，对他热情有加，并把梁鸿先生和孟光女士从破烂的屋子里请进了自家舒适宽敞的客房。
但出乎皋伯通先生的意料，当地方官员找到梁鸿先生的时候，梁鸿先生一口拒绝了去洛阳做官，他知道以他的性格必然会招致更多的祸害，他也不会得到用武之地。远在洛阳的刘炟先生听到这个消息，也没在说什么，最终放过了梁鸿先生。
在皋伯通先生的一再要求下，梁鸿先生把自己的故事讲给了他听。他听后感动不已，决定要为夫妻俩免费提供食宿，直到他们不愿意住下去为止。
梁鸿先生在皋伯通先生家里住了下来，但仍然坚持每天去舂米。也就是在这个时候，梁鸿先生完成了许多著作。正当他潜心著书的时候，不幸的事情发生了，他染上了重病，不久以后就撒手人寰。
死之前，梁鸿先生对孟光女士说："我听说以前的隐士在死的时候从来不选择安葬之地，所以你也不要把我的尸体或者骨灰带回家，就把我葬在这里吧。另外，你不要难过，我这一辈子遇见你是我前世修来的福分。如果有来生，我仍然愿意和你在一起。"孟光已经泣不成声，她只得一遍又一遍的点头，眼前这个她这一辈子唯一爱过的男人即将离她而去，她除了悲伤的哭泣，还能做什么呢？孟光女士这一辈子，即使在生活最困顿的时候也没有流过泪，可是这一次她把所有储藏下来的泪水全流了出来。
梁鸿先生死后，孟光女士回到了家乡，老爹老娘劝她改嫁，她坚决不从。曾经沧海难为水，这一辈子有梁鸿先生一个人，就已经足够。
