土围子，是刘秀的心腹之患。
特权阶层，这种准土围子现象，也没少给刘秀添麻烦。
刘秀的姐姐刘黄，就是这样一个麻烦制造者。不知是他未给老姐找个老公的原因，还是他打江山时顾不上赡养二老使她颇受点子苦，刘秀称帝后便处处让着她，宠着她。这位公主在洛阳城里大造宫苑，大盖府邸，骄奢富侈，不可一世，像所有的特权阶层一样，忘乎所以，胡作非为。湖阳长公主府，竟成了一个敢于圈土夺地，养奴蓄婢，私藏亡命，对抗官府的据点。
毛泽东所说的土围子，至少离当时的党中央四五十里地，可刘黄的土围子就在洛阳城里刘秀的眼皮子底下。汉光武帝作为开国之君，在历代王朝中，算不上第一流的。范晔在《后汉书》里，对刘秀所作的评价，极其一般：“能明慎政体，总揽权纲，量时度力，举无过事。”概而言之，无大功绩，无大过错。不过，我认为，一国之君，能够“量时度力”，使老百姓平安度日，能够“举无过事”，使老百姓休养生息，也就很过得去了。历史上有些英主，那些伟大光荣，常常给民族带来痛苦，那些英明正确，往往是牺牲民众福祉为代价的，“明慎”的刘秀，说不定倒是老百姓的幸运。
他在打江山时，显得比较聪明，因而比较走运，主要是他的敌人，对手，竞争者，几乎都是智商不高之辈，所以，他取得最后的成功。但是，他的智慧，他的能量，到了坐江山时，就心有余而力不足了。主要是他终其一生，也未能改变豪强和特权阶层大量拥有田亩、奴婢和私家兵卒，实行奴役制度的政经耕武四合一式的庄园坞壁局面。刘秀曾先后九次发布释放奴婢的命令，要削弱这种土围子式的豪强势力，结果也是被广泛抵制而失败了。