不言堂现在的配置，若是人数多一些的话，说是一个正规的门派也不为过。军不言地位最高，总领一切，其下便是何叔，掌管各个分堂。
而不言堂的分堂也很详细，除了之前提到的树明堂和神机堂以及刚刚成立的药堂之外，还有武堂和商杂堂。
与药堂一样，武堂的负责人也不是军不言招募的，而是落枫刀坊的人，名叫厉空，是落枫刀坊掌门的大弟子，在刀坊之中颇有话语权。让这样一个人来当不言堂的分堂主，足见落枫刀坊合作的诚意。
武堂的领头人是这样一个人，所以其中的成员也大多是落枫刀坊之人。而武堂日常负责的事情，除了保卫不言堂之外，有些计划的实施需要借助到他们的一身高绝武功。
商杂堂其实是两个分堂，分别是商堂和杂堂，之前军不言觉得分堂设立太多，显得冗杂，便把这两个堂合并一处，并称商杂堂。
虽然商杂堂合并了，但是其中依旧是有着两位分堂主，分别管理商堂和杂堂。商堂，顾名思义，负责经商赚钱，不言堂日益壮大，每天的开销自然不会小，以军不言之前的积蓄，恐怕撑不了多长时间，所以便需要商堂来运营一些营生。
而杂堂，则是负责后勤事务以及其他的一些杂事。这两个分堂的堂主都是之前太平客栈的老人，所以军不言对他们十分放心。