经过艰难跋涉，介之推母子终于走出了栖贤谷。此时眼前豁然开朗，只见远处半山腰有一山岩，好像鱼形，和它相对的另一山岩又形似龟状。
见此情景，介之推忽然想到了《诗经》中“子之于归，宜其室家”的诗句。心想，“鱼龟”与“于归”谐音，这里岂不就是自己结庐隐居的地方？但又想到“子之于归”多指女子出嫁，又有点拿不定主意。介母看出了他的心思，便说：“我儿只知其一，不知其二。女子出嫁是找到了归宿；你我找到藏身之处岂不也是归宿？”
一番话说得介之推心明眼亮。从此母子二人便在这里搭建草屋安身，临溪而饮，采薇而食，过起了无忧无虑的隐居生活。人们以后便把此山叫鱼龟（于归）山。