据说在他发配期间，很多学子慕名而至，他嫌麻烦，不肯收徒，学子们便纷纷凑钱，买了一艘大船跟在他的飞庐之后，每当他登岸游览，这些学子便跟在身边，以与他谈诗论画为荣。

后来当地官府实在看不下去，便让他到县学坐馆，众人以为他不会答应，没想到他欣然应允，以至于县学人满为患，甚至有举人跑去旁听，只为能成为他的弟子，一时传为笑谈。

因此有人弹赅他在发配之地结党营私，折子刚刚递上去，窦太后便被赵极软禁了。赵极看到折子，才想起曾经有过一个为他出头的张承谟。

赵极立刻下旨召张承谟回朝，官复原职，拜国子监祭酒。

张承谟婉言谢绝，离开gx就此不见踪影。

又五年，他的著作流传于世，并在太湖之畔开坛讲学。

赵极得知后勃然大怒，派了锦衣卫把这个不识抬举的东西抓回京城。

没想到这一次张承谟竟然十分配合，锦衣卫到的时候，张承谟一家老小早已收拾停当，正襟危坐，旁边都是整理好的箱笼，锦衣卫一到，他便说：“你们怎么才来，快点走吧，再晚就错过今秋京城的红叶了。”

到了京城，他不去诏狱，急着要去见皇帝，锦衣卫无奈，只好如实上奏。赵极派人抓他过来是气他不识好歹，想让他吃吃苦头。闻听此言反倒生了好奇之心，召见了张承谟。

张承谟进宫时，让两个儿子抬着一只巨大的卷轴进来，打开卷轴，竟是一幅舆图。

这幅舆图详细记录着大周朝的山山水水，比宫中珍藏的舆图更加详细。