正当赵家准备为赵挺之隆重地举办丧事的时候，一道晴空霹雳从天而降，几天前还极度显赫的赵丞相家，一下子遭遇了灭顶之灾。
原来，蔡京对老对手赵挺之一直耿耿于怀，赵挺之的死并没有结束二人的宿怨，他毫不留情地出手了。
就在赵挺之死后第三天，蔡京以有人举报赵挺之“结交富人”为名，下令把赵家兄弟及其他在青州和开封的亲戚统统抓了起来。经过长达四个月的隔离审讯，蔡京没有得到任何有力的证据，七月才把被抓的人放了出来。蔡京的险恶目的没有完全达到，最后只是以曾经推荐过赵挺之的前丞相刘挚系“元祐党人”为由，给赵挺之加了个包庇“元祐奸党”的罪名，将他生前的官职褫掉了。当初没敢为亲家李格非说一句好话的赵挺之，死了以后，照旧背上了“力庇元祐奸党”的黑锅。
在赵家兄弟被捕入狱的那些日子里，李清照又急又愁。她和婆母郭氏四处奔走，为营救亲人出狱想尽了办法、跑断了腿。这期间，她备尝世态炎凉，官场诸人的各色嘴脸，使她看到了许多以前在书本中未曾看到的东西。虽然只有短短的四个月时间，李清照却一下子老了许多。当然，她也成熟了许多。
由于赵明诚是受父荫出仕的，赵挺之死后被夺官，自然要牵连到赵明诚，他也被罢官了。
看破世事的李清照，在从牢狱接回赵明诚后就与丈夫商量，建议离开京城这一是非之地。她的想法与赵明诚正相同。他们决定回到山东青州去，在赵家故里（赵挺之原籍诸城，后迁居青州，故青州为赵氏故里）安安稳稳地过日子。
公元1107年（宋徽宗大观元年）的初冬，一辆篷车在寒风中离开了开封城。前不久飘落的一场小雪正在融化，路上十分泥泞，所以车子走得极慢。篷车里，并肩坐着赵明诚、李清照夫妻二人，好长时间他们谁都不说话。李清照在想，5年前，父亲李格非就是在这样一个日子里离开京城的，不知道他老人家现在身体怎样？弟弟李迒如今也不知在何处？是仍然跟随在父亲身边呢，还是在别处求学？前方就是山东老家了，故乡大明湖如今还不至于封冻吧？还有孩子们在那儿划船吗？……赵明诚则在默默地回忆着这几年在京城的生活，回忆着在大牢里那四个月的折磨。
忽然，赵明诚像想起了什么，只见他眼睛一亮，说：“甚霎儿晴，霎儿雨，霎儿风——懂了，我现在才算是弄懂了！”他一把握住了李清照的手。李清照依然默默地坐着，什么也没说，只是感到被丈夫握住的手暖和多了。
