第壹， 有講下坊話（又叫懷城話，粵語混合瑤族語言的壹種，跟潮汕話和閩南話有點相似。）的古懷集縣人，由懷城、連麥、中州、閘崗（有些著保留客家話）、坳仔、鳳崗、洽水、甘灑、泰來（泰來話，受上坊話和壯語影響）等鎮組成的下坊區，人口45萬左右，面積2037平方公裏，以懷集縣東部、中部山區為主，馬寧水、中州河交匯綏江處的懷城盆地地理位置最好，古懷集縣縣府就在懷城。
第二， 有講上坊話（又叫開建話、信都話，粵語混合了客家話的壹種）的古洊水縣人由梁村（部分講標話）、崗坪、冷坑（有些保留著客家話）、藍鐘、大崗（部分講標話）、馬寧等鎮組成的上坊區，人口大概40萬，面積711平方公裏，以懷集縣西北部梁村-冷坑盆地為主，乃廣東省山區縣中的最大平原，是稻米之鄉，古洊水縣縣府在梁村鎮永紅村鎮口寨洊水崗頭。
第三， 有講標話（講爆、融合了壯侗族的部分語言壹種標語）的古永固縣人由永固鎮、橋頭鎮（大部分講橋頭話）、詩洞鎮（ 壹部分講白崖話）、還有梁村和大崗壹部分講標人口組成，人口約20萬人。總面積728平方公裏，以山區為主，古永固縣縣府在永固鎮。講標人曾多次向政府申請少數民族待遇，都遇到拒絕。
第四， 是懷集縣北部的下帥鄉（壯族，瑤族區），人口1萬人，面積76平方公裏，以山區為主。
懷集縣最早有歷史記載的是西漢漢武帝時期，漢武帝平南越，從北方遷移了壹支族群，居住在仁義-信都、南豐-長安、梁村-冷坑三個相互連接的盆地，設立封陽縣，縣府在今賀州市信都-仁義盆地的鋪門鎮。仁義-信都、南豐-長安、梁村-冷坑三個相互連接的盆地經過上千年的聯婚、管治，加上南宋時期遷來大量的客家人，形成了同壹種習俗，講同壹種語言開建話（上坊話、信都話，粵語混合了客家話的壹種）。
東晉十六國，南北朝時期，北方大亂，漢人紛紛南遷。
北方遷來兩個族群，壹支就是下坊話人（懷集縣下坊人和廣寧縣、陽山縣等都是跟當地瑤族人通婚，都講這種下坊話語言。）居住四會縣綏江流域（今四會市、廣寧縣、陽山縣、懷集中部、東部山區），南北朝劉宋元嘉十三年(436年)，劃南海郡四會縣設置綏建郡，綏建郡（四會市）設立新招、化蒙、化穆、化註等數縣，原屬於四會縣的銀屯鄉設立懷集縣（取縣域內民瑤雜居，欲長民者綏懷而聚集之意），這就是古懷集縣。
另壹支就是講標話人，他們遷移至懷集縣南部山區和封開縣北部山區跟壯侗族的祖先百越族通婚雜居，南北朝劉宋年間(424～453年)分從封陽縣分出懷集南部設立永固縣（永固水壹帶），管治今天永固鎮、詩洞鎮、橋頭鎮、大崗鎮和梁村鎮部分，廣寧縣古水鎮部分，還有封開縣的長安鎮部分，屬臨賀郡（今廣西賀州）管治。
南北朝南齊把人口眾多的封陽縣按照仁義-信都、南豐-長安、梁村-冷坑三個盆地分為三個縣，分別是封陽縣（縣府在賀州鋪門鎮），開建縣(縣府封開縣在南豐鎮)、洊安縣（縣府在懷集縣梁村鎮，管治包括廣西靈峰鎮等地），屬臨賀郡（廣西賀州）管治。
隋朝統壹南北，開皇九年(589)撤綏建郡，並撤新招、化穆、化註三縣，分入四會縣、化蒙縣管治，古懷集縣與四會縣、化蒙縣（今廣寧）屬南海郡（廣州）管治。
唐朝初期，置齊州、威州分別設治於洊安縣、懷集縣（這就是我們曾經申請過的威州市由來）。齊州管治洊安縣、開建縣、封陽縣等地，威州管治懷集縣、永固縣、化蒙縣等地，齊州、威州同屬南海郡（廣州）管治。
唐朝中期，開元二年(714年)並永固縣入威州懷集縣。取消齊州和威州。四會、懷集、化蒙（廣寧）、洊安（梁村-冷坑盆地）4縣隸廣州。
唐朝至德二年(757年)改洊安縣為洊水縣（洊水就是後來的馬寧水）。
宋朝開寶五年（972年）北宋滅南漢政權，並洊水縣（梁村-冷坑盆地、廣西靈峰鎮）入懷集縣，自此形成今懷集縣的基本境域。同年西面，信都盆地的封陽縣入臨賀縣（今賀州八步區）。南豐盆地的開建縣入封川縣，但不久又分裂成開建縣和封川縣，兩縣均隸屬德慶州。同年東面撤化蒙縣和化穆縣（這兩個縣都是今廣寧縣，廣寧縣要到明朝中期嘉靖三十壹年(1552)漢、瑤兩族人造反，鎮壓後才成立的）並入四會縣。開建縣成了古封陽縣唯壹壹個能保留縣級政府的壹個小縣，從此開展了多次先後跟封開縣、懷集縣合並，又分開的鬧劇。宋元時期，開建縣人壹直希望想恢復古封陽縣，以相同的語言、風俗、三大盆地交通方便為借口，整合開建縣（南豐盆地）、封陽縣（信都盆地）、洊水縣（梁村盆地）、永固縣（永固盆地），建立壹個以南豐盆地為中心的大開建縣。
開建縣的想法當時獲得了肇慶路的支持，肇慶路想取原化蒙縣（廣寧縣）跟懷集縣合並，重新成立壹個族群大縣，開建縣跟原洊水縣、原封陽縣、原永固縣合並為壹個族群大縣。但此舉，遭到了臨賀縣和懷集縣的強烈反對，懷集縣甚至在元朝至元二十九年（1292年拒絕跟隨肇慶路，返回廣東道）脫離了肇慶路的管治，加入了臨賀縣新成立的賀州。開建縣組建大縣的希望破滅，都又不願意跟封川縣、懷集縣合並，結果壹直以小縣存活到1961年。而廣寧縣則到了五百多年後的明朝中期(1552)，才能單獨建縣，之前壹直歸四會管治。封川縣則壹直想跟廣信路（梧州）合並，升級為府治。
元朝之前，懷集縣先後歸臨賀郡（賀州）、綏建郡（四會）、南海郡（廣州）、肇慶路管治，元至元十六年（公元1279年）元滅南宋後，把肇慶府該為肇慶路，隸廣西道，湖廣行省。懷集縣改隸湖廣中書行省廣西道肇慶路賀州，
元朝至元二十九年肇慶路改屬江西行省廣東道，懷集縣沒有跟隨返回江西行省廣東道，而是選擇留在湖廣中書行省廣西道。
明朝洪武九年（1376年），朱元璋統壹南方，賀州撤州改賀縣，賀縣和懷集縣改隸廣西梧州府，至此懷集縣至1952年都屬於廣西梧州府管治。從版圖看，懷集縣80%的邊界跟廣東接壤，只有崗坪鎮西邊的靈峰鎮的山區跟信都盆地接壤（還隔著大山，無法聯系），看起來有點怪怪的。在古代因為靈峰鎮山路不通信都盆地，懷集縣要跟賀州、信都、梧州聯系，必須走開建縣（開建盆地）
清朝光緒三十二年，信都鄉（信都盆地）改為信都廳，懷集舊管境內（今廣西賀州八步區靈峰鎮）松柏營及金鵝、龍塘、藍山、大竹埇壹帶山嶺改隸信都廳，民國元年1912年懷集縣西面的信都廳改廳為縣；1951年，信都縣並入賀縣後設立信都鎮。
1952年，廣東將北海、欽州、防城港劃給了廣西，作為補償，懷集縣由廣西劃給了廣東。
1952年3月，封川、開建兩縣合署辦公，稱“封川開建縣”，但開建話和廣信話（封川縣）兩個方言的族群，因為縣府爭執問題（封川古城和南豐的縣府定位，開建人認為應該把縣府定在人口眾多南豐盆地，而不是江口鎮那個沒有發展空間的山城），再次分裂。1958年封川、開建兩縣第N次分家。
1958年11月1日，根據高要地委250號文決定，開建縣與懷集縣合並為懷建縣；封川縣與德慶縣合並為德封縣。
很快開建人，又跟懷集人為了縣府問題鬧崩了。開建人認為講上坊話（包括開建人）和講標話的（包括開建縣長安鎮部分人口）人口占全縣大半，而開建（南豐-長安）盆地和梁村-冷坑盆地，發展空間比周圍都是山的懷城鎮要好（駐解放初期，懷城鎮的發展並沒有比其他鎮好多少，解放之後升為副處級別，才集中資源發展了起來，挖空了很多山頭），應該把縣府遷移到南豐盆地或者是兩縣中間的梁村-冷坑盆地，這樣才公平。
這事激怒了懷城的下方人，1959年懷城鎮立即把懷建縣的牌子給砸了，重新恢復懷集縣名字。開建人愛來懷集縣，就來。
開建與懷城之爭。驚動了上級。
同時封川縣與德慶縣兩縣也因為縣府問題鬧崩了，（因為封川古城和德慶古城，發展空間太小都不適合當縣城，需要另外選壹個中心區域鎮當縣府），鬧得不可調節。而當時全國各地都在爭省府、市府、縣府的位置，比如吉林省的省府由吉林市遷到長春、黑龍江省府有齊齊哈爾遷到哈爾濱、河北省府由保定遷到石家莊，河南省府由開封遷到鄭州，安微省府由安慶遷到合肥，廣西省府由桂林遷到南寧，肇慶市市府由高要遷到端州區等等。
1961年，懷集縣劃出了開建縣，德慶縣劃出封川縣，封川縣和開建縣合並，改名字封開縣。但開建人和封川人為了縣府問題（剛開始協商在兩縣中心取某鎮為縣府，但封川人把縣府挪在江口鎮這個小山鎮不走了。）至今2017年還在鬧矛盾。
1952-1983年懷集縣講標人曾多次向省政府申請少數民族待遇，都遇到拒絕。1980年代-90年代，懷集縣多次向省政府和國務院申請副廳級的威州市，都遭到了拒絕。