此時(shí)出來(lái)一個(gè)叫鄭俠的看守城門(mén)的小官，他畫(huà)出了一張《流民圖》，連同一篇上書(shū)，運(yùn)用關(guān)系以急件直達(dá)皇帝手中。書(shū)中說(shuō)：“愿陛下開(kāi)倉(cāng)廩，賑貧乏，取有司掊克不道之政，一切罷去。冀下召和氣，上應(yīng)天心，延萬(wàn)姓垂死之命?！边€說(shuō)：“旱由安石所致，去安石，天必雨?！辈⒄f(shuō)如果十日不雨，“即乞斬臣宣德門(mén)外，以正欺君之罪”。宋神宗反覆觀圖，長(zhǎng)吁數(shù)四，袖以入。是夕，寢不能寐。此時(shí)兩個(gè)太后也哭著對(duì)皇帝說(shuō)：“安石亂天下。”于是皇帝就沒(méi)經(jīng)王安石同意，“命開(kāi)封停放免行錢(qián)”。

免行錢(qián)是王安石新法之一，宋代除向工商行戶(hù)收取商稅外，官府需要的物料人工，都向各行勒派，行戶(hù)不勝其苦。熙寧六年改為用錢(qián)折算，有錢(qián)的出錢(qián)，有力的出力，稱(chēng)為“免行錢(qián)”。

皇帝又令司農(nóng)寺再放常平倉(cāng)糧米，暫停收交青苗錢(qián)和免役錢(qián)，暫罷方田法與保甲法。

王安石再次要求離去，既想改革又想安撫守舊勢(shì)力的皇帝，以手詔諭王安石：“欲處以師傅之官，留京師?！?/p>

但王安石還是堅(jiān)持要走。他跟皇帝說(shuō)，“欲臣且留京師以備顧問(wèn)”，我也“誠(chéng)不忍離左右”，但是，經(jīng)過(guò)認(rèn)真考慮，我以為，陛下現(xiàn)在已有可接受之人，推誠(chéng)委任，足以助成圣治，所以我“義難以更留京師”。不過(guò)，王安石也同時(shí)跟皇帝說(shuō)，“至于異時(shí)，或賜驅(qū)策”，“所不敢辭”。

在王安石已成守舊派的眾矢之的時(shí)，他的離去也許可以以退為進(jìn)，為改革贏得生路。

皇上沒(méi)辦法，只好又賜手詔說(shuō)：“繼得卿奏，以義所難處，欲得便郡休息。朕深體卿意，更不欲再三邀卿之留，已降制命，除卿知江寧，庶安心休息，以適所欲。朕體卿之誠(chéng)，至矣，卿宜有以報(bào)之。手札具存，無(wú)或食言，從此浩然長(zhǎng)往也?！?/p>

熙寧七年四月，王安石罷相，“以吏部尚書(shū)、觀文殿大學(xué)士，知江寧府”。宋神宗依王安石的推薦，任命韓絳、呂惠卿為正副宰相，繼續(xù)變法改革。

有一些人認(rèn)為，王安石是在這次罷相回江寧的途中寫(xiě)下那首《泊船瓜州》，“明月何時(shí)照我還”，意味著王安石憂心他何時(shí)再返政壇重新掌權(quán)。然而這種見(jiàn)解實(shí)在是更讓王安石孤獨(dú)寂寞了。

王安石在江寧只待了十個(gè)月，便再次被宋神宗召回了朝堂，實(shí)在是用誰(shuí)都不如王安石。

普遍認(rèn)為，王安石是在此次出江寧時(shí)寫(xiě)下《泊船瓜州》，這個(gè)說(shuō)法比較符合王安石的心態(tài)——他再次出山，更多的是留戀后土，而不是展望前途。春草年年綠，王孫歸不歸？歸！

王安石見(jiàn)到了皇帝，他拿出自己在江寧所寫(xiě)的詩(shī)《六年》，送給這位對(duì)他一直念念不忘的年輕皇帝：

六年湖海老侵尋，千里歸來(lái)一寸心。

西望國(guó)門(mén)搔短發(fā)，九天宮闕五云深。

千里歸來(lái)一寸心，兩個(gè)人是君臣，卻更像是英雄惜英雄，知己憐知己。連宋神宗都自言：“自古之君臣，如朕與安石相知絕少。”

王安石回到汴京才一年，他深?lèi)?ài)的兒子王雱去世，王安石大受打擊，從此更是對(duì)這片大宋的江山意興闌珊。他來(lái)到此世間，不過(guò)蜉蝣一世，石火光中，爭(zhēng)長(zhǎng)兢短，幾何光陰？蝸牛角上，較雌論雄，許大世界？這些功名利祿終將付與歷史大潮的沉沙，唯讓他覺(jué)得此間溫暖的只是這一片親情而已。

而王雱不僅是王安石的愛(ài)子，更是變法的支持者和參與者。同時(shí)，他也是王安石文學(xué)上的知音。王雱為世間留詩(shī)不多，只一曲就驚艷：“相思只在，丁香枝上，豆蔻梢頭?！边@么優(yōu)秀的兒子去世，怎不讓王安石大慟？

有一天，王安石在一段墻壁上看見(jiàn)兒子王雱的遺墨，悲傷地寫(xiě)下：

題永慶壁有雱遺墨數(shù)行

永慶招提墨數(shù)行，歲時(shí)風(fēng)露每悽傷。

殘骸豈久人間世？故有情鐘未可忘。