在灵石山、棋盘山一带，旧时以樵夫伐木山间，空谷回响的情景取名。今山林茂密，封山育林，伐木景象早无。灵石山在西湖乡双峰村后(西)，海拔97米。清雍正《西湖志》卷三：“灵石山在南山栖真院之上，旧名积庆山，山上多奇石，时时见瑞光，故曰灵石。中有坞曰灵石坞，路最深窈，人迹罕至，惟樵子往来其间，山歌一曲，辄与樵斧丁丁相应答，岩石皆响，真山中之清籁也。”
西湖又名钱塘湖，元代有“钱塘十景”的说法，景目为：六桥烟柳、九里云松、灵石樵歌、冷泉猿啸、葛岭朝暾、孤山霁雪、北关夜市、浙江秋涛、两峰白云、西湖夜月。其中“两峰白云”、“西湖夜月”两景目与南宋西湖十景中的“两峰插云”、“平湖秋月”意思相同，所以后人常称“钱塘八景”。