道林寺，始建于六朝。道林寺唐以前的历史，记载不详。到了唐朝，道林声名鼎盛。首先是入唐之后，长沙籍大书法家欧阳询为道林题写了匾额：“道林之寺”，谓道林“为道之林也”。“痴癫”米芾评价说“笔力险劲”。而后众多文人为道林书写了华章。曾记游道林的墨客有：骆宾王、杜甫、宋之问、韩愈、刘长卿、刘禹锡、张谓、沈传师、韦蟾、杜荀鹤、唐扶、李建勋、裴休、齐己……杜甫一首《岳麓山道林二寺行》，不仅留下“玉泉之南麓山殊，道林林壑争盘纡。寺门高开洞庭野，殿脚插入赤沙湖”的千古名句，还在游道林麓山后萌生了想要在长沙安居的念头：“飘然斑白身奚适，傍此烟霞茅可诛”（两年后杜甫逝世）。因杜甫诗，宋之问诗，沈传师和裴休笔札，尤为著名，后有人建筑了“四绝堂”来安放这些宝物。