不僅如此，蘇軾的姬妾們紛紛離開了他。離婚協議書如同雪片一般朝蘇大學士的腦袋飛來。離婚的理由也是千奇百怪。比方說，小妾甲，在離婚協議書中寫因爲嫌棄蘇軾窮，蘇軾同意了，笑一笑，在離婚協議書上籤署了自己的大名。再比如說，小妾乙，在離婚協議書中表明蘇軾是朝廷罪臣，要堅決與他劃清界限，蘇軾苦笑一下，也同意了。不過，更讓人覺得損人的，是小妾丙丁戊等人的做法，她們竟然在離婚協議書中寫蘇軾得了ED（erectile dysfunction我不去說是什麼意思，請感興趣的讀者自己去查找相關資料，不過我估計大多數讀者都不認識這兩個單詞），蘇軾看罷，真的是哭笑不得，但還是無可奈何地在離婚協議書上寫下同意。
其實啊，我們真的沒有必要站在道德的制高點上去聲討這些離蘇軾而去的小妾們，因爲她們嫁給蘇軾，也就是圖一個榮華富貴，而現在，蘇軾好比落地的鳳凰————不如雞，那麼那些小妾們也就是“夫妻本是同林鳥，大難臨頭各自飛”，她們如同破網的魚兒，遊向大海，出籠的鳥兒，飛向雲空。她們還年輕，有機會去追求自己的愛情。她們紛紛對蘇東坡say goodbye，轉過身來去擁抱她們自己喜歡的人。當然，也有一部分姬妾與僕人在蘇軾耐心的勸說之下，選擇依依不捨的離開蘇軾。
因爲，客觀現實就擺在那裡，嶺南，條件太差，實在不是中原人能夠待的地方。也許有讀者會擡槓、會發議論說，嶺南那個地方，現在多麼多麼好，那可是改革開放的前沿地帶，寸土寸金，條件好着咧！不過，我想告訴你，那時現在，是現在！放在一千年前的大宋王朝，那裡沒有空調沒有高樓大廈、甚至是沒有醫院、沒有飯店、沒有任何娛樂場所，你想擁有的很多東西那裡幾乎都沒有。就拿這如何消暑這件事情來說吧，如果你是個土豪，你可以花錢僱幾個人，享受到平頭奴子搖大扇，用這種辦法消暑。不過，就算你再有錢，在那個時候想吹空調，門兒都沒有。
這下子你就明白爲什麼那些想要追隨蘇東坡的絕對少數會知難而退了吧？要是你，前往那煙瘴之地，還不知道要在那裡待多久，估計，你的心裡也是一百萬個不願意。
但是，在前面的講述中，我們忽略了一個女人。她，同意了，而且無怨無悔。
這個人就是王朝雲。
“我怕是要死在這南荒之地，我只不過是一個朝不保夕的朝廷罪官而已，你爲啥還要不離不棄，追隨我到惠州呢？”蘇東坡很是不解地問王朝雲。
“老爺，先別說這喪氣話。我要告訴老爺，我是一定要追隨老爺的。老爺走到哪裡，奴就跟老爺去哪裡。當年，我是夫人（王閏之）從青樓裡贖出來的，是夫人幫助我跳出了火炕，夫人臨去世之前交代過奴，讓奴家一定照顧好老爺。再說了，沒有了老爺，那些姬妾還可以改嫁，奴又能如何呢？奴的新生命是老爺夫人給的，奴不去跟着老爺，又能跟着誰人呢？”王朝雲說罷，流下一行清淚。
“快別哭，快別哭。你一哭，我的心都要碎了。”蘇東坡趕忙上前去給王朝雲擦拭淚水。
王朝雲止住淚水，正色道：“老爺爲奴作詩，說奴不似楊枝別樂天，恰如通德伴伶玄。奴不要去做薄情寡義的楊枝，要去做重情重義的樊通德。”
蘇東坡聽罷，感嘆了好久，對王朝雲說：“嶺南那麼落後、那麼不適宜人居住，但你還是願意陪我，我真的好感動，你，就是我的希望，你叫朝雲，現在，我給你取一個表字，叫子霞，你就是我生命中的彩雲，就是我生命中的朝霞，誰又能代替你呢？（當然也沒有人願意代替她）”
“奴在汴京，在定州，在許多地方都發過誓，要與你生死相隨。請你一定不要丟下我！我們一起經歷過許許多多的艱難，經歷過風風雨雨，我，永遠是你的人，死了，也是你的鬼！”
蘇東坡把王朝雲摟在自己的懷裡：“我知道，我明白。王朝雲，你是我最喜歡的人，雖然你只是如夫人，但是我愛你，我一直都把你當作跟王閏之那樣的正室夫人。這一點，我相信你也一定明白。”
蘇東坡輕輕撫摸王朝雲的頭髮：“我的才氣不比那唐代的白居易差，但是，我比那白居易更有福氣，白居易晚年，總是擔心他的愛妾樊素、小蠻離他而去（這裡所說的樊素與小蠻，正是白居易詩中所寫的櫻桃樊素口，楊柳小蠻腰中的兩人。也就是不似楊枝別樂天中的楊枝，楊枝其實是兩個人。），但是啊，在白居易六十八歲之時，他中風發作，頭暈目眩，行走不便。於是他寫下《別柳枝》，兩枝楊柳小樓中，嫋娜多年伴醉翁。明日放歸歸去後，世間應不要春風。他最終下定決心，讓樊素小蠻活得自由。他讓樊素先離去，留小蠻在自己身邊。然而，事與願違，小蠻在內心裡並不愛這個年老昏聵的白居易，最後，離家出走，不知所蹤。所以說，白居易的晚年，空虛，寂寞，冷。”
“還好，我身邊有你。謝謝你，我愛你。我比起那唐朝的白居易，更幸福。你在我艱難的時候，還是與我生活在一起，照顧我的生活，我該用什麼報答你呢？”
爲了防止受到瘴氣的侵襲，蘇東坡與王朝雲開始學習釀造桂花酒。