1969年，珍宝岛反击战后，上级要求在京无职务的老干部被疏散到各地，担任过军科院副秘书长的王智涛被安排到山西榆次。

在他的认识当中，如果打起来被疏散，如果打不起来也可以回京，毕竟说是疏散，没有让留在当地不回来。实际上按照上级的要求，没有批准是不允许擅自回京的。因为他们是在运动中被靠边站的人，如果不靠边就是在位置上，哪里需要疏散呢。

王智涛收拾好行李后就到榆次干休所住下，比起不少被疏散到农场劳动，干校劳动的人来说，他的情况算是比较好一些的，至少不用被监督劳动，至少在生活上要有一定保障。不过，比起在京的生活以及在职生活的待遇是不一样的。

在榆次生活2年，随着干部政策情况，有个别干部恢复工作，子女不知道从哪里获取到消息，认为他如果继续在榆次生活，第一时间并不能解决自己的问题，倒不如回京看形势发展，也好快速解决问题。对此，他本人是赞同的。毕竟当时说战备疏散，如今也没打起来，有什么理由不让回呢？

因此在没有经军科院的同意下回京，经过一些熟人的帮忙找到一个落脚点，居住的房间不大，只有三室一厅，按照他们两口的住房需要完全够用，甚至都有富裕。可他们还有一个保姆，以及儿孙。这样下来房子自然不够住，只能是另想办法解决。

王智涛到过去所住的房子看，那里还贴着封条，也是他们走后贴的。这让王智涛看到希望，如果说房子已经被占了，那也没有话可说，现在还是封存状态，他把封条撕后搬进去了。还是过去的老房子，熟悉的环境，就像从来没有离开过一样。

这么大事情怎么可能不透风，被相关部门得知，人家让清退，而他就是不搬，而且还准备充分的理由。即便他们把情况上报给军科院领导，王智涛都有信心让领导们无话可说。

他首先向军科院递交报告要求做结论，要求平反，要求回京。可院党委没有答复，既然这样，自己就“先斩后奏”了。军科院领导找他谈话，有人批评他没有组织纪律性，擅自回来，严重影响到军政关系。

王智涛表示；自己被审查2年，关1年，扣那么多帽子，怎么不公布结果？为什么不逐一对审查问题做出实事求是的结论？就一句内部矛盾打发了？自己对此要求解决问题，总得不到回复怎么回事？此前离开是战备，现在也没有打起来，不应该回来吗？

一套套说辞，不少领导也没有多说什么，像副院长宋时轮刚恢复工作，对于王智涛的遭遇更是深有体会，也没有说太多，有人让他离开，可粟裕政委发话：难道把他再关起来，武装押解回去？他的一番话基本上是一锤定音，默认他留下。至于如何向人家管理部门回复呢？其实也没有什么，这本来就是王智涛过去居住的地方，只要军科院同意，其他单位也不好再说什么。

对于他舌战群儒，擅自回京等情况，宋时轮院长对他说：老兄，胆子不小！

1972年，军科院换领导，宋时轮担任院长，粟裕担任第一政委主持工作，对军科院的问题进行整顿、落实平反。可王智涛的工作问题没有解决，算是有一个对方住。直到1975年，给他安排担任军科院顾问，或许考虑到他身体状况不佳，担任顾问，发挥一些预热也是很好的。那时候，还没有打破干部终身制，顾问也是想离休过渡的一个职务。