文學方面
鹹淳九年(公元1273年)二月,呂師夔的叔叔呂文煥以襄陽失守,投降了元朝,使得當時正在廣西任制撫的呂師夔惶恐不安。他深感有負皇恩,無地自容,於四月間五次上書宋度宗,請求辭官還里省親,然後再奔赴前線殺敵立功,宋度宗不予批准。五月初五,朝廷下詔召回呂師夔。呂師夔在離桂前,與屬下十六人一同到龍隱岩遊玩,留下了 留別題記:
古壽呂師夔虞卿,以成淳八年春被恩牧桂,明年夏
五,叨召東歸。、乃率偕行者壽(保存)諸石……
軍事方面
就在呂師夔離桂後的第二年(公元1274年)六月,元世祖忽必烈下達了滅宋詔令,九月,正式向南宋發起總攻。呂師夔叔父呂文煥降元後,率領元軍攻打長江沿線,在元軍強大的攻勢下,長江防線土崩瓦解,南宋守將紛紛降元。當時鎮守九江,才被任命為兵部尚書兩天的呂師夔也不例外,帶領九江眾守將向元軍獻城請降。1276年初,元軍占領京城臨安,此時的南宋政權實際上已名存實亡。