《清人书评》还记载了有关王潜刚家史的内容。在点评邓完白的章节中，他写道：“又在壮陶阁（裴景福书房雅号）见篆书（指邓完白作品）大八寸强，雄厚古雅。又予外祖家亳州何氏，收藏条幅三寸大篆书，最晚年作，亦则精。”由此可见，王潜刚母亲姓何，安徽亳州人。据《安徽霍邱王宾先生家谱》记载，王何氏 1872年生王潜刚，她随王宾生活20余年，于1893年11月8日去世。此时王宾从上海赴海门直隶厅任同知不久。获王何氏逝世的消息，王宾的忘年交，也是王潜刚的老师张謇，专程吊唁，他在当天的日记中写道：“吊王雁臣同知夫人之丧。”

又如，在评论清大书法家梁巘一文中，王潜刚写道：“先生由巴东回，主讲寿州书院，寿州去吾邑仅百里，先生与先曾祖父轶群公交最契，至岁杪不回亳州而至吾家度岁，至正月乃回寿州。吾家例换桃符皆先生手笔，甚至祀灶前之‘上天言好事，下界保平安’，亦欣然命笔。邑人索书者坌集，不能遍应。先曾祖父辄代书之，钤印持去，人不能识也。吾家藏先生书至多，未裱者成束。咸丰七年兵乱之后，不但先生之书荡然俱尽，即先曾祖之书除石刻先墓碑外，亦无只字留存。今存先生书数十件，皆予浪迹南北数十年所得者，非吾家旧物也。”

梁巘（1710—1788），字闻山、文山，号松斋，又号断砚斋主人，清乾隆二十七年（1762）敕授文林郎壬午科举人，由咸安宫教习转任湖北巴东县知县、寿州（今安徽省寿县）循理书院院长等职。王潜刚这段对梁巘书法的评述，道出了其家史中另一条重要讯息，即他的曾祖父叫王轶群，与梁巘过往甚密。在中国人的传统习俗中，每逢佳节倍思亲，春节往往是归心似箭。而梁巘却在王家过年，至正月后才回乡。王家的例换桃符，由梁巘亲自书写。甚至连供奉灶王爷的“上天言好事，下界保平安”等俗语，梁巘亦欣然命笔，更有“邑人索书者坌集，不能遍应”。可见王、梁两家关系非同一般，或许就是亲戚，有待今后考证。