余家以工书称者颇多，香泉太守及匏庐宗伯最有名。太守少时梦登一楼，满贮隃糜，有神人谓之曰："供子一生挥洒。"自是书法日进，以岁贡生受圣祖特达知，入直内廷。雍正十一年，世宗敕以公书勒石，为《梦墨楼帖》十卷。高宗爱其书，与张氏天瓶、汪氏时晴鼎峙焉。事记余《翰林秋室集·跋语》中。乾嘉以来，四海争购公书，日本国王尤嗜之，海舶载往，辄得重值，致故乡几无遗墨。余所藏公草书《庾子山春赋》十二幅，一时无对。辛未冬，张子青制府来上海阅机器，余以制府为今代书家，悬之行馆，用供赏鉴。有候补道某公见之，谓是恶札，何可溷制府，遽令撤去。人皆以公负书名百年，忽遭此厄为笑。壬申冬，余谒制府，谈及公书，制府亦有珍藏者。余述某观察语，制府亦大笑。
公政事卓绝，山西、贵州、江西皆祀名宦，而循声乃为书名所掩。公平时每梦至一处，园亭山石，极幽雅之致，墙外有寺有塔，心甚乐之，如是者有年。比守南安衙斋，正如梦境，遂卒于官。匏庐宗伯为香泉太守之侄，康熙癸未，与弟文勤相国同入翰林。圣祖临朝，举手谓文简公曰："大喜，汝家又添二翰林矣。"公免冠谢，举朝荣之。入直南书房，书法特荷温旨褒嘉。纯庙御极，命缮写御制诗，内府书籍、秘殿珍藏，悉俾管钥，洊历春卿。数年之间，扈从凡二十七次，宠遇之隆，一时无两。居家撰著，不下百数十种。奉敕所成者，有《历朝题画诗》、《全唐文》、《宋史补遗》、《谥法考》诸书。行草出入二王，而得香光神髓。即颜欧虞褚及宋四家无不研究，遇真迹必拨冗仿写，无间寒暑。书名倾动寰宇，夷酋土司，金潾玉巑，咸欲邀公尺幅以为家宝。南中赝手不下数百辈，公闻之略不计也。然公之文学，亦竟为书法所掩。余在上海得购公所临《灵飞经》一册，张子青制府叹为精绝，为之题跋，拟以入石，尚未果也。