杜心五在县城居住不久，便回到白岩峪。因他年高德劭，武艺超群，又是青帮龙头，故人均尊称为杜老师。回家后，杜老师先后在江垭徐小桐家，象耳桥邓恒臣家等处设坛开堂，发展青帮组织，一次即达百数十人。

　　杜老师家居时，看到穷人给他家送一背篓猪草，就要那人背一篓大米回去。

　　在白岩峪期间，杜老师常吃核桃，但从不用锤子，只用手一捏，核桃就开了。在此乡居，他仍要徒弟天天练功。由大徒弟李丽久带班，一同由长沙来的陶良鹤夫妇和李如圭兄弟等十多人，每天拂晓都来参加。他们先练剑功，再练拳术，从不中辍。

　　国民党政府迁重庆后，蒋介石想利用杜心五的声望和帮会势力，派员接他去重庆，委以全国抗日群众动员委员会主任之职。

　　1941年3月，杜氏离慈赴渝。他先住重庆沙利文旅社，后迁南温泉一庄园，但国民政府军令部次长刘斐慕名接杜到他家居住，并在他私人防空洞躲避敌机空袭。—天，刘问杜国共两党将来到底谁胜谁败。杜直言不讳地回答：“共产党必胜，国民党必败!”此时，得杜高传的万籁声亦在重庆，两人过从甚密。在渝一年，杜氏积极从事抗日救国活动，并曾以青帮身份帮助中共地下组织派党员和进步人士去外地工作。至1942年，他恐怕最高当局怀疑，便辞职回慈利，隐居不仕，直到解放以后，才去长沙供职。

　　杜心五从重庆回县后，先去白岩峪家中居住。这时，有擅长猴拳的唐石次作随身护理。稍后，杜氏选定县城附近饭甑山的绕河寨(寨为元末明初农民起义领袖谭□所筑。俯瞰娄水，三面险崖，唯一径可上)，修建住宅。要他的徒弟柳林铺富豪朱泰顺主其事，给了朱四千光洋，限期一月修好。这座砖木结构的平房落成之后，杜命名为“斗米观”。堂屋正中挂有达摩祖师的画像，像两边是“始知养生主，曾无及第心”的对联。大门两边贴有“十二天上坐，二七地下生”对联。他栖隐于此，与白云青松为邻，以清风明月为友，探索气功养生之道。

　　1942年下半年，杜心五在赵善夫家与名中医吴凤翥相会。吴谈及打算修建水碾的事。杜对吴说：“修水碾是好事，但是，收米一定要少。别人碾坊一次收一升，你只收半升才好”。吴表示同意。

　　有一次，国民党将领彭位仁到斗米观拜会杜老师，杜有意安排给他煮菜粥吃。但是，驻在永安渡抗战伤兵去到他家以后，却亲切地抚慰他们.并以酒肉相待。

　　1945年9月，有个河南武士彭玉林到斗米观求见杜氏。他口称慕名前来领教，心想为师(柳森严)报仇。杜正坐在圈椅上吸烟。问他擅长什么，他说是“顶功”，人称为铁头。旁侍的朱允年见此人身材魁梧，便接过杜老师的铜水烟袋。杜刚从圈椅上站起来时，彭玉林趁机一头猛撞过来，杜只一巴掌便他打倒在屋角桌下。彭爬起后，用尽浑身之力，又—肩撞过来。杜身一纵，用脚后跟回击他并顺势将其头夹在腋下，并点了他的穴，彭立即跪下连呼“师爷饶命”。杜便叫朱允年拿来三粒丸药结他治伤，并对他说：“慈利像你这样的武士多得很，你最好赶快离开慈利。”

　　杜氏通晓医药，尤擅长治跌打损伤。他自制千捶膏与丸、散、用以救死扶伤，施善积德。他为穷人治病，从不收受酬谢，但有钱人求医，则曰“到医院去!”他的徒弟如李家齐、朱允年、韦精诚、戴子贤等人，都跟他学过采药治病(李家齐和韦精诚学的是千捶膏)。

　　1946年，柳林铺街上李玉恒之子李同和(时年十四)，在近邻屋后河坎边柳树上柯干柴，不慎从五丈多高的树上跌下来，奄奄一息，人事不省。李家卖米粑粑，家贫，不能送医院急救。李玉恒找到朱允年，求他请杜老师救治。杜先给四十一粒小丸子，要朱送去，并叮嘱朱不得在他家吃饭。朱送到后，用酒灌下，约二十分钟，李同和便排出血尿。朱回斗米观向杜老师说明伤情后，杜又要他送去三粒半大药丸。伤者服下后不久，淤血即从大便排出。次日，杜又给膏药四张，要朱买二十元钱的麝香和敷，并嘱朱允年，买麝香的钱，要记他父亲朱泰顺的帐。数天后，伤者即渐痊可。李玉恒为感谢杜老师救子之恩，特选上好桔红一背篓送到斗米观。杜老师要他背回去卖了买米，并且还打发四包副食品给李妻，说“你老妈子好苦啊!”李玉恒感动得大哭一场而归。如今，这位被杜救活的李同和已五十三岁，在柳林铺牛场当会计。其他被杜老师义务诊治的，还大有人在。