《臺州府志·名宦傳》載：“沈作賓，字賓王，歸安（今浙江吳興）人。淳熙十六年二月以承議郎知臺州。首訪民疾苦，馳鹽禁，寬祖期，均徭役，更酒政，決滯獄，五十日間，盡除前政之不便民者，邦人胥悅，而前守嫉其勝己，巧媒蘗之，罷去。民請于朝，借留不遂，為立留賢碑。”當(dāng)?shù)匕傩諡榧o(jì)念沈作賓專門在留賢碑畔建造了一座橋，橋名“留賢橋”。《赤城志》載，西留賢橋“在縣西二十里，淳熙十六年（1189）為沈守作賓建�！焙髞磉@里居人漸多，形成了一個村莊，村以橋名。