宋時西湖有三賢祠兩：其一在孤山竹閣。三賢者，白樂天、林和靖、蘇東坡也。其一在龍井資聖院。三賢者，趙閱道、僧辨才、蘇東坡也。寶慶間，袁樵移竹閣三賢祠於蘇公堤，建亭館以沾官酒。或題詩云：“和靖、東坡、白樂天，三人秋菊薦寒泉，而今滿面生塵土，欲與袁樵趁酒錢。”又據陳眉公筆記，錢塘有水仙王廟，林和靖祠堂近之。東坡先生以和靖清節映世，遂移神像配食水仙王。黃山谷有《水仙花》詩用此事：“錢塘昔聞水仙廟，荊州今見水仙花，暗香靚色撩詩句，宜在孤山處士家。”則宋時所祀，止和靖一人。明正德三年，郡守楊孟瑛重浚西湖，立四賢祠，以祀李鄴侯、白、蘇、林四人，杭人益以楊公，稱五賢。而後乃祧楊公，增祀周公維新、王公?州，稱六賢祠。張公亮曰：“湖上之祠，宜以久居其地，與風流標令為山水深契者，乃列之。周公冷麵，且為神明，有別祠矣。?州文人，與湖非久要，今並四公而坐，恐難熟熱也。”人服其確論。

張明弼《六賢祠》詩：

山川亦自有聲氣，西湖不易與人熱。

五日京兆王?州，冷麵臬司號寒鐵。

原與湖山非久要，心胸不復留風月。

猶議當時李鄴侯，西泠尚未通舟楫。

惟有林蘇白樂天，真與煙霞相接納。

風流俎豆自千秋，松風菊露梅花雪。