1865年，梁成富率兵从火中冲出来，与清军搏斗。太平军只有一百来人，面对数千清军，却丝毫不畏惧，没人选择投降，终因力量悬殊而失败。

困守庐州的日子，陈玉成想到了一个计策：率兵远征陕西、甘肃，招兵买马的同时，尝试建立一块基地，进可攻退可守。

梁成富，陈玉成麾下“四大金刚”之一，与陈得才、赖文光、蓝成春一起同时受封为王，也是陈玉成部将最早封王的一批。

陈玉成兵败安庆，洪秀全严厉斥责他，却册封麾下4将领为王，希望他们能感恩戴德，振作起来，继续与清军战斗。

梁成富出兵河南，旋即进入湖北，从陕南进入关中，抵达西安郊外。此时，关中清军兵力不足，防守薄弱，太平军进展很顺利。

就在梁成富准备攻城，陈玉成急忙派人送来书信，让他们赶紧回来。因为，多隆阿的军团已经困死庐州，陈玉成兵力不足，难以守住城池。

得知英王有困难，“远征4王”火速赶回。谁知，陈玉成轻信苗沛霖建议，在寿州被俘虏，凌迟而死，梁成富失去了救援目标。

陈玉成死后，李秀成派人联络“4王”，并跟他们约定：“24个月后返回江南，解救京师之围”。如此，梁成富再次远征，太平军第二次抵达西安。

太平军再次回来，清军有了防备，梁成富等4王便继续进入陕甘腹地，然后南下攻取汉中，并招收兵马20万，实力有所复苏。

1864年，天京告急，约定24个月时间到，4王立刻从关中南下。途中，梁成富在河南遭遇八旗马队拦截，无法进入湖北，且粮食即将吃完，只好再次回到关中。

1864年7月，天京陷落，清军得以调集重兵北上，围剿太平军，梁成富在关中的日子不好过。

梁成富一筹莫展之际，西南起义军余部北上，在蔡昌荣率领下进入甘肃。梁成富得知消息，立刻派人去联络，然后一起夺取阶州，并策划攻取汉中。

阶州地位重要，是进入川蜀的重要门户，故而清军十分忌惮。为此，清朝让四川总督骆秉章、陕西巡抚刘蓉联合进攻，率3万兵马攻城。

梁成富、蔡昌荣采取“坚壁清野”战术，将附近粮食全部收入城中，并将城池加高三尺。城池之外，遍布堡垒，炮台，挖掘壕沟，构筑鹿角，阻止清军进攻。

城池之内，则修筑一座土城，城内也修筑堡垒。梁成富此举，是为了让清军知难而退，一旦骆秉章粮食耗尽，且太平军经常夜袭，不得不撤退。

攻坚作战，对清军而言难度很大，持续几个月的战斗，清军伤亡过万，却没有什么进展。再则，太平军经常乘着清军松懈时发起进攻，频繁夜袭，骆秉章时刻不得安宁。

骆秉章是个猛人 ，连石达开都可以扑灭，何况是梁成富呢？攻坚受挫，骆秉章不再强攻，而是采取围困战术，派兵袭击给太平军运粮的西北起义军，断绝城内粮食补给。

熬了9个月，梁成富终于挺不住了，城内粮食所剩无几，且外援断绝。此时，骆秉章才下令挖掘地道，同时挖十几条，然后埋置炸药，进行爆破。

城墙毁坏，清军蜂拥而入，梁成富、蔡昌荣率兵巷战，与清军厮杀。对方人多势众，太平军招架不住，便退入城南一座堡垒，继续战斗。

骆秉章派人劝降，梁成富、蔡昌荣不为所动，他们知道石达开的结局，即便是“请降”都保住，更别说是投降了。

梁成富、蔡昌荣拒绝投降，清军便手持火弹，扔进堡垒之中，并在外面堆积柴薪焚烧。

熊熊大火，梁成富、蔡昌荣已经无路可退，便率一百余人从堡垒冲出来，冒着大火冲锋。可惜，清军的“洋枪队”早就严阵以待，一起齐射，蔡昌荣阵亡。

梁成富手持大刀，一度冲到清军跟前，却身中数弹，扑倒在地，成了俘虏，受凌迟而死。

阶州之战，太平军在劣势情况下，与清军战斗9个月，没人选择投降。此战，陈玉成留在西北的太平军覆没。2年后，陈玉成部将邱远才进入关中，太平军又活跃了一阵子。