灵源洞四周悬崖峭璧，刻满了自宋以来的历代题咏，荟集了篆、隶、行、草、楷各体书法。
传说在宋庆历六年（1046）的一个傍晚，福州知州蔡襄带领几位僚属，漫步在风景如画的鼓山。随着晚风的轻抚，他们沉醉于这片美景，竟忘却了时间的流转。当暮色渐渐笼罩，他们依然依依不舍。在这情景中，蔡襄的灵感涌动，他挥毫泼墨，以遒劲有力的笔触，在灵源洞蹴鳌桥东端的岩壁上，留下了“忘归石”三个大字。
蔡襄擅长书法，其楷书上承颜真卿，端庄谨严，体格恢宏，点画无丝毫苟且；行书则潇洒简逸，颇得晋人韵致。他力求去除时俗流弊，另辟蹊径，下开苏轼、黄庭坚、米芾等新风，连接唐、宋两朝书风嬗递，身兼尚法和尚意两种艺术追求，在中国书法史上起到了承前启后的作用。
