端州城区回族人口不多，但历史源远流长。根据肇庆回族所保留的族谱、碑铭及父老们的叙说来看，回民的祖先大部分是明清时期随军驻戎或因经商关系而入粤。最早的一批是明景泰元年(1450年)董兴奏请留下从南京调来镇压黄萧养的“达官营”都指挥使廉忠属下四百余名官兵驻守广东。明成化二年(1466年)，韩雍奏请让他们连带家属在广东定居，作为屯田兵的一部分。明万历《肇庆府志》称他们为哈密人。宣统《高要县志》称他们为回回人。此部分回族人一般居住在肇庆城东水师营附近，另一部分居住在城西的回族人系清初迁来。至明末清初，由于明皇室朱由榔在肇庆建立南明永历政权与清王朝抗争，加上此段时间广东各地相继发起抗清斗争，于是清政府征调各路兵马，多次进军广东，围剿肇庆，以镇压反清运动。当时各省有一批回族军士，亦被迫应征，随军作战。战事平息后，大多数回族军士留籍肇庆。故明末清初，肇庆成为广东回族的第二个聚居地。

        清初吴敬梓《儒林外史》的第四回及第五回，就曾以高要县（现端州）的回族作为小说的描写对象，可见当时居住在肇庆的回族已有相当数量。此后，肇庆的回族陆续向广州迁移，规模最大的一次是抗日战争期间。抗战前肇庆的回族达2000多人，抗日战争前夕减至1000人左右。现在广东回族流传着“先抵肇庆，后住广州”的说法，就是对这段历史的反映。

         端州现有本地户籍回族同胞160户左右，约有610人。2000年，由于城市发展需要开通宋城二路，肇庆市人民政府需征用三联巷附近回族同胞集体用地，居住在三联巷的回族同胞积极配合市政府的征地拆迁工程，在较短时间内顺利进行协商并签订了拆迁合同，为建设美丽幸福肇庆贡献自己的一份力量。

         回族同胞有小集中、大分散的居住特点，并且每周需要做礼拜。市、区政府以及城西街道办事处一方面为了尊重回族同胞的生活习俗，另一方面，也为了让回族同胞由农村人口向城镇人口转化，生产方式与生活方式由乡村型向城市型转化，经过心思熟虑，不断加强与回族同胞沟通协商，最终决定在宋城三路沙街村安排专门土地给拆迁回族同胞修建住房。回族同胞在沙街村新修建的住房大多数依照他们的生活习惯和宗教信仰来装修，从而形成了一条具有回族特色建筑风格的小街道，肇庆端州的“回民村”也由此而来。