据传说，王轩曾游西小江，泊舟于苧萝川，感国色瘗尘，怆然题诗于浣沙石上：
岭上千峰秀，江边细草春。
今适浣纱石，不见浣纱人。
题罢不久，忽见一艳容女子，
振动环佩，扶着石笋，婀娜而前，道：
妾自吴宫还越国，素衣千载无人识。
当时心比金石坚，今日与君坚不得。
说完，便与王轩燕好一番，临别还有诗词赠与，一片痴情。
后来，这事传到萧山郭凝素的耳里，他非常艳羡，但没法到浣纱溪口一行，于是题诗于屋后石上，更夜宿其旁以伺灵会。但不知怎么搞的，等了好半天，美人不来，反来了群鬼，魑魅魍魉，环而嬲笔，抛瓦戏弄。郭大惊，立刻爬起遁去。后闻者莫不笑痛了肚子。
他的朋友朱泽，作诗以嘲道：三春桃李本无言，若被伤残鸟雀喧。借问东邻效西子，何如凝素学王轩？