后来有传闻，徐世军即便在二道河看守所里也跟一般的罪犯不同，他喜欢下象棋，当时甚至还为了他在看守所里举办过象棋比赛。
不过，这也只是传闻，并不足信，
出狱以后的徐世军似乎接受了经验教训，并没有继续建立什么帮派，而是成立了一家投资公司开始做生意，当然也没有什么正当生意，最拿得上台面的就是放高利贷。
据说南山区和二道河四邻八乡的农民在全国最先享受到小额贷款的好处，因为他们要想以个人的名义从银行贷款简直比登天还难。
可从徐世军的公司借款只要签个字画个押就能把钱那到手了，当然必须承担高于银行的利息。
作为黑帮分子，徐世军当然还是改不了掠夺的本性，他的投资公司除了放高利贷之外，免不了干点敲诈勒索的老本行。
只是被敲诈的对象基本上都是外面来二道河做生意的商人，徐世军有个原则，作为农民出身的黑帮分子，他绝不欺压自己的乡里乡亲。
这使他在当地拥有广泛的群众基础，所以，外来户基本上没人敢跟他作对，只要徐世军伸手，他们就得乖乖奉上保护费，直到有一天他碰上了外来户周继尧，情况才发生了改变。
其实周继尧也不是一开始就拒绝交保护费，在翅膀没有硬之前，他也只能忍气吞声把自己贩卖保健品的利润拿出一部分孝敬徐世军。
只是在跟汤家联姻之后才决定挑战徐世军的在二道河的权威，事实上当时徐世军已经把家搬到了南召市，跟后起之秀周继尧并不是太熟悉。
其实周继尧之所以跟汤家联姻，目的也是为了能够在二道河站稳脚跟，他的岳父汤镇业虽然不是道上的人物，但他岳母的一个远房侄子冯刚却是南山区一个老牌帮会的头目。zw.
这个秘密帮会虽然影响力和实力都比不上徐世军，但也没人轻易敢惹，因为他们干的可是杀头的勾当——贩卖毒品。
徐世军虽然什么坏事都干，但不贩毒，不但自己不贩毒，也不允许别人在他的地盘上贩毒，因为他认为毒品是非常邪恶的东西，是城里人堕落的象征，他绝不允许任何人用毒品毒害家乡的百姓。
所以，他创立四方会之后，多次跟冯刚的帮会发生冲突，无奈冯刚是南山区老一辈黑帮头目，树大根深，冲突的结果是谁也没有占到便宜，最后只能讲和，以冯刚承诺不把毒品在本地贩卖了结了这场冲突。
实际上当时本地也没有多少毒