"文化大革命"时期中，他被打成"反革命分子"，在新疆劳改了十多年。

1979年才返回重庆，被选为市政协委员。

== 武术生涯 ==

光阴如梭，时间飞逝，几十年里吕紫剑一直以医术为人治病，同时设立武馆，传授武当功夫。据估计，如今仅内地由他教出的武当徒弟就已经逾五六千人，这些徒弟又授徒，算起来已传授至了第五代，徒子徒孙真的不计其数。虽然他人在四川，但他的徒弟甚至远达香港，其中最出名的要算香港天罡气功第三代掌门人马志富。自幼年起学习武当功夫的马志富，少时跟从师傅张影晴学天罡气功，一学便是30多年，现为天罡气功第三代掌门人。他最近两年才拜吕紫剑为师，学习八卦掌。在吕紫剑授徒过程中，常常有人尊少林，贬武当。其实古语有云"北宗少林、南尊武当"，少林及武当这两家的上乘武功各有其独到之处，若要比试武功，未必能分出胜负。马志富表示，少林功夫是硬功，武当则是以静制动、刚柔并重、快如闪电、慢如抽丝。少林功夫是外家功夫，少林派人一看其外表便知是练武之人;但武当派人则真人不露相，只有运气发功时才露出其内家功夫。马志富获得吕老前辈的真传，专心习练八卦掌。