象牙山作为一个村子，可以说是有四大家族：以刘能为代表的刘氏家族，以谢广坤为代表的谢氏家族，以王老七为代表的王氏家族，以赵四为代表的赵氏家族。这四大家族又通过婚姻联系在一起。刘能与赵四结为亲家，谢广坤与王老七结为亲家。
在这四大家族中，论政治地位，刘能和赵四家族要强于谢广坤和王老七。毕竟刘能当过象牙山村副主任，还代理过主任，这也是刘能一直引以为傲的；姑爷赵玉田也当过村主任，上面派来第一书记后，又担任主任助理，是象牙山年轻一代从政的佼佼者；而这个上级派来的第一书记郭金山，又是刘能媳妇的亲侄子，喊刘能为姑父。
反观谢广坤与王老七这边，基本上都是经商做买卖，很少有从政的。不过，谢广坤媳妇的表弟齐三太曾经当过松山镇长，后来调到县里干副县长，可谓是谢广坤最大的“后台”。谢永强刚毕业找工作时，齐三太出力不少。但是越到后来，随着齐三太的高升，在象牙山的影响力反而不如以前，毕竟“县官不如现管”。
论经济实力，绝对是谢广坤与王老七“财大气粗”。谢广坤一直以象牙山“首富”自居，当然有炫耀的成分，但绝对不是凭空说的。先不说自己家那点山货生意，也就是小本买卖，自己儿子谢永强有果园，后来又成立了水果加工厂，亲家王老七与儿媳妇王小蒙有豆制品厂，规模都不小，都是象牙山著名的企业，也可以说是支柱产业。
反过来看刘能与赵四这边，就有点“寒碜”了。刘能是地地道道的农民，以种地为生，后来土地流转出去了，靠租金或分红生活。赵四这边经济基础相对较好，主要是有个花圃，后来逐步也做大了，成为象牙山支柱产业之一，但是也始终无法与谢永强果园和王小蒙豆制品厂相抗衡。
总起来说，象牙山这四大家族，一边政治势力强大，一边经济实力雄厚，从政经关系来说可谓旗鼓相当，维持着象牙山政治经济生态的平衡。
别看象牙山这四大家族政经实力强大，但是象牙山一把手始终是由四大家族之外的人担任（刘能只是代理过村主任，赵玉田当村主任的时候，老徐是支书，党领导一切，赵玉田这个村主任也只是二把手）。一开始是王长贵，后来是老徐，再后来是郭金山，现在是杜小双。王长贵与老徐在村里都势单力薄，一个跟媳妇相依为命（老徐），一个跟女儿相依为命（长贵），家里人口都不算多。郭金山与杜小双则是上级派驻到村子里的，是典型的“外来户”。这几个一把手又与四大家族形成了平衡。否则无论四大家族哪一方担任一把手，都会打破象牙山现有的政经平衡状态。
值得一提的是老徐，一开始只是村里一个会计，后来先后担任了主任、支书，上面派来第一书记后，还担任着村主任，可谓象牙山政坛“常青树”。老徐在村里家族势力不大，经济实力也有限，连老婆花200块钱买件新衣服都舍不得，为人又很正派，做事也很公道，对谁都笑呵呵，人称“徐老面”，所以能够成为各方都能接受的“领导”人选，也在调和着四大家族之间的矛盾，维持着象牙山的“大局稳定”。
