1923年1月16日，滇桂军与粤军第一师攻占了广州。滇桂军对百姓很残暴。甚至他们的士兵也摆出征服者的姿态，把广州当作被征服的领土，好像是第一师向他们投降。他们歧视我们。要知道，只有第一师同他们合作，洪兆麟带着第二师以及效忠陈炯明的不少杂牌部队逃到了东江地区。

第一师的高级军官都认为我们不应驻扎在广州，因为桂军与滇军正直扑广州，我们害怕他们吃掉粤军。1月17日，第一师开始向江门、新会、四邑集结。第一师改组，师长梁鸿楷被任命为广东第一剿匪军军长，李济深继任第一师师长。原应陈可钰继任师长——我们都拥护他——但他病了。这就是李济深取而代之的原因。我敢说，李济深在第一师安插一个人都办不到。

卓仁机被任命为第一旅旅长，下辖两个团，第一团团长是梁鸿楷堂弟梁鸿林，第二团团长由卓仁机兼任。陈济棠被任为第二旅旅长，下辖邓演达统率的由原工兵营扩编的第三团和戴戟统率的第四团。

除了第一师之外，梁鸿楷手下就没有其他部队了，他专心统领第一师，我们都尊敬、服从他。

第一师驻扎在四邑，我的营驻扎在台山县的公益，隶属于卓仁机。

1923年2月21日，中山先生返回广州，重新担任大元帅职，古应芬在江门组建了大本营办事处。1916年我在澳门见过古应芬，当时他只是个平民，对我们 梁鸿楷革命青年甚难施加影响力。现在，我对他有了深入了解，他外号叫“烂大鼓”，“鼓”字与他姓氏“古”同音，陈济棠成了他的教子。

从福建回师广东后，第二军驻扎在东江地区，也是因为害怕被滇桂客军吃掉。

此时，我二弟贵斌来投靠我。原来我不希望他从军，他的养母去世了，我希望他回家陪伴父亲。此外，他已结婚，不适宜从军。他不听我劝告。我让他做士官，他留在营部没有固定职务，我仍然希望他回乡。不久，父亲逝世，我同贵斌、嘉斌一起回乡参加父亲的葬礼。