在刘湘手下的一帮师长中,刘树成和周成虎是嫡系中的嫡系。每逢遇到关键时刻,刘湘都要召集刘、周二人秘密相商;刘、周二人对刘湘的感情,也始终是忠心耿耿,矢志不渝。1938年刘湘死后,蒋介石认为四川群龙无首,正是侵吞蚕食的大好时机,立即召集顾祝同、张群、陈诚等人商讨如何解决四川问题。按照蒋介石的意见,准备撤销第七战区司令长官部让张群接手四川省政府主席一职。消息传到四川,招致川军旧部的强烈反对,他们结成一体,不甘屈服。蒋介石不得己,只好作出让步,让王缵绪代理四川省政府主席,邓锡侯为川康绥靖主任,潘文华为第二十八集团军总司令,王缵绪为第二十九集团军总司令,王陵基为第三十集团军总司令,刘文辉为重庆行营副主任,郭勋祺、郭昌明、许绍宗为军长。如此大规模封官,才勉强平息了来自川军旧部的抗议浪潮。
然而川军旧部的暂时得势,与刘树成并没有多少关系。刘湘已死,刘树成的保护伞没有了,其地位也一落千丈。蒋介石对刘湘留下的川军这笔遗产,或利诱或威逼,利用川军内部矛盾采取分别蚕食的手法,多方瓦解分化。抗战八年,四川是全国出兵最多的省份,当时川军在各线作战的有唐式遵、孙震、李家钰、杨森、王缵绪、王陵基等部。计有六个集团军,12个军和36个师。日本投降后,川军伤亡人员众多,部队编制也残破不堪,蒋介石不仅不补充兵力,却以整编为名,大量裁减川军,将所有军的番号都整编为师。此时,继承刘湘衣钵的川军首领潘文华,手上仅保存两个师了。刘树成的军队属于裁减之列,自然不在这两个师的编制以内。
从已故的刘湘身上,刘树成得到了一个启示:有了枪,一切才有希望。见大势已去,刘树成也为自己安排了一条后路。在一个风高月黑之夜,他安排一帮人夜入兵营,将部队缩编后剩下的一批机关枪、步枪、手枪以及大量子弹等,悄悄从仓库里搬出来,连夜武装押送,从眉山运回大邑,储藏到安仁乡仁和街刘树成的公馆里。
就是这批枪支弹药,惹出了一桩震动全川的事件。
将这批枪支弹药运回安仁后,刘树成立刻奉命出征,前往新整编的第五十六军十七旅任旅长。临行前,他放心不下储藏在安仁的这批武器弹药,叫来侄子刘福田促膝谈心,让他负责看守武器弹药,并交给他一个特务连的人马。
殊不知,此时安仁乡的形势极其错综复杂,各种政治势力都在争夺其势力范围。他们听说刘树成从眉山秘密运回了一批枪支弹药,早已虎视眈眈。首先,是袍哥组织公益仂、进社的总舵把子刘文彩打起了这批武器的主意,他派人对刘福田进行策反,试图让刘福田自动投靠自己。共产党的地下组织得知情报后,准备组织一次武装劫持。但是没等地下党下手刘文彩那边就已成功收买了刘福田。尽管事已至此,地下党继续努力,在刘文彩组织人马抢夺武器之时,暗地从中拿走了4支德国造罗汉手枪和两支天津造的手枪。
刘树成得知这一消息后,咆哮如雷,气得操起烟枪狠狠朝侄子刘福田脑门上砸。然而也是毫无办法,哑巴吃黄连,他只好认了这个账。事后,刘树成曾找过重庆行辕主任何应钦,要讨回一个公道。可是何应钦除了同情外,也表示无能为力。此事最后的结果是不了了之。
刘树成后来的归宿是这样的:1949年6月,他在刘文辉手下担任雷波、马边、屏山、峨边、沐川的守备司令;同年10月,在四川犍为县率部起义。解放后,刘树成曾经担任四川省人民政府参事室参事,四川省委员至今,大邑县安仁镇依然存留着一幢刘树成公馆。此公馆建于1928年坐西向东临街,为三进院落,南向有个大花园。公馆为砖木结构的两层建筑,雕花门窗,实木地板,具有川西民居特色。1949年后,刘树成公馆收归国有,曾做中共安仁区委、安仁镇人民政府办公场所。1993年临街的公馆大门和前院被拆除,修建为临街商铺和办公楼。1999年出售给安仁中学,现为安仁中学初中部教师办公院。