嶺南有三大豪族，也稱為俚帥獠酋，其實都是早年南下的漢人大族。
如馮氏家族，本是十六國時北燕君主后裔，南朝劉宋朝廷派馮業到羅州任刺史，以后馮氏與土地俚酋冼氏世代聯姻，擁有高州一帶地方，成為嶺南三大豪族之一。
武德初，朝廷把馮盎所據之地劃分為八個州，授他上柱國高州總管，先封吳國公，后改封耿國公。
而寧氏家族，則是以廣西欽州為基地，在其勢力鼎盛時期，東達郁從、白州、銅州，西有西原、南擁大海，北至邕州。
陳氏家族則是在南朝梁時崛起，形成一個左右珠江西江南岸的豪族，從陳法念起，陳佛智、陳龍樹等世代顯宦，世襲嶺表酋長，功名赫赫。
三大家族都是占據大量的田地、僮仆，甚至有強大的私人武裝。
“馮、陳、寧三大家族均以竇州為界分割勢力范園，竇州境內地勢東北高、西南低，以山地地貌為主，境內崇山峻嶺、河溪縱橫，云開山脈北列，山勢自然分隔高涼、瀧州、欽州三地，”
武懷義雖說廣州都督沒當多久，但他韶州刺史干了兩年多，對于嶺南的三大土皇帝家族可是很了解的，
三家是真正的土皇帝。
比如說陳家的陳佛智，他就是隋朝時嶺南叛亂的首領，曾經圍攻廣州，如今他兒子陳龍樹仕唐，也是武德末嶺南馮暄談殿等叛亂時，朝廷平叛戰爭中的鎮壓主力。
在嶺南，中原朝廷真正控制的地方不多，也就廣交桂幾個核心，其余多數地方都是馮陳寧這樣的俚帥控制著，
而在許多山區，則是大量被稱為俚獠蠻的蠻族聚居，尚未設立州縣，也是那些地方豪族勢力爭奪的地位。
蠻地未設州縣，沒編戶籍，三大豪族便想辦法侵掠地盤，威逼利誘他們順從自己的統治。
這種南下的漢人豪族跟當地土著蠻部間的戰爭，千百年來從沒停止過。
馮立在廣州都督四年，對于嶺南局勢穩定還是有功的。
武德末的嶺南叛亂，也可以稱做是三大豪族跟蠻族的亂戰，如馮盎跟馮暄兄弟倆，馮暄就反叛朝廷，馮盎則為朝廷出兵鎮壓，寧氏內部打的更兇，
而如冼氏家族，以及談殿等蠻王也差不多，
反正就是打的一團亂，李世民即位后，這仗都還在打，李世民都一度打算發兵十萬南下征討，后來還是魏征勸住了，借用馮盎、陳龍樹他們效忠朝廷的力量，來討伐叛亂者，再以招撫政策輔佐，
馮立雖是建成太子黨出身，但正因為出身，到廣州后還是很老實低調，不搞事情，為皇帝老實安撫地方，讓嶺南難得有幾年安定日子，起碼沒啥大規模的亂戰。
可侯君集現在想搞事情，
想讓嶺南再亂起來，再打起來，這樣他才有機會。
侯君集能力還是有的，到嶺南很快就摸清了那邊的情況，他一開始想跟馮盎拉關系，但馮盎這人相當了得，對侯君集不冷不熱，對武懷義卻是更親近。
侯君集沒能拉上馮家，轉而便跟陳龍樹走近了。
“陳龍樹是陳佛智的兒子，當年反隋攻打廣州，冼太夫人讓孫子率馮冼聯軍救援廣州，陳佛智最后死在馮盎手下。
陳龍樹遂投欽州寧猛力，武德年間，陳龍樹與寧猛力之子寧長真一起歸附大唐，陳龍樹被任命為欽州刺史，后又被任為瀧州刺史，南扶州刺史。
如愿回到陳氏瀧州故地。”
端溪羅竇諸洞，本屬瀧州陳氏勢力范圍，但在陳佛智叛亂身死后，陳龍樹被迫逃亡投奔欽州寧氏，羅竇諸洞蠻部也是紛紛自立，
馮氏寧氏更是不斷滲透，想要蠶食吞并。
陳龍樹投唐后，雖說后來回到了瀧州故地，但那些諸洞蠻并不肯再聽他陳氏號令。
陳氏無力號令諸洞，于是想借用朝廷勢力，陳龍樹先奏請朝廷置信義、譚峨兩縣，后又請設南扶州，再又奏請增設特亮縣等，以對羅竇洞諸蠻納入朝廷統治。