據楊氏通書記載：楊姓在宋元之前，基本上是北方的顯姓望族，“宋室南渡”后，楊氏紛紛遷入江西。楊氏九十一世楊庸攜周氏從江西遷四川古藺定居七世后，楊尚義攜文氏遷居至一片荒蕪人煙的丘陵山地落業(yè)（今沔山四組）。落業(yè)后，居住地不能沒有地名，為了尋根問祖，楊尚義本來想沿用沔水作地名，但因該地無溪水、泉水，故將水改為山字，定名為沔山。