1162年,宋孝宗趙慎起用主戰派張浚,準備北伐。孝宗召見了陸游,陸游趁此良機提出了許多政治軍事主張,並給予趙慎以有力支持
。但是北伐失利,宋再度向金求和,孝宗意志動搖,朝中主和派重新抬頭,張浚被罷官,陸游也被削職還鄉。1170年,陸游到夔州(今四川奉節縣)任通判。後來又到四川宣撫使王炎的幕府中辦理軍務,積極向王炎提出恢復中原的作戰策略。但是,由於朝中投降派的阻撓破壞,王炎被召回朝廷,幕府也被撤散。陸游的作戰主張不僅得不到實現,自己也被調到成都府安撫司任參儀官。 1173年夏,他被任命為蜀州(四川崇慶)通判(副州官)。不久,又被調到嘉州(四川樂山),年底才又回到蜀州。報國無門,愛民無力,終於在1174年十月,陸游又被調到榮州(四川榮縣)去攝理州事。陸游,在蜀州雖然只有一年多時間,但對蜀州感情十分深厚。即使晚年回到浙江山陰老家,也還寫了許多記念蜀州的詩篇。蜀州人民也懷念放翁詩人,詩人長溘之後,人們的罨花池旁為他和趙忭([宋代]一御吏,曾作蜀州官)修一廟宇,稱趙陸公祠,後改稱“二賢祠”。現在,“二賢祠”已改建為“陸游紀念館”。