相传宋朝后期，当时阳江城附近农村有一个老太婆。有一天，讨到了很多人家弃之不要的锅巴，她拿回来泡上残汤，当饭吃了两天，后将这些锅巴放到屋顶上晒干，以备日后讨不到饭时当干粮。她把那日前储备的锅巴拿出来充饥，又把讨来的糖和着锅巴吃，吃剩的，老太婆就捏做成一团，烤干，留作下顿作“饭”吃。吴老太的“粉酥”从那以后就在社会上流传开了，这就成了现在炒米饼的雏形。——传说有些牵强，但有据可查的是，在清末民初，炒米饼在阳江已经是一个发展比较成熟的产业了，当时阳江城里已有专门生产粉酥的“饼铺”20多间。20世纪40年代后期，阳西横山人苏名溪在阳江城开设了“河水安”饼铺，专门生产以粉酥为主的各种礼品饼，把阳江的粉酥生产推向一个新阶段。解放后，“河水安”、“天兴”和“丽章”三家糕饼铺公私合营，成了当时广东以生产炒米饼为主有名的“河天丽”饼面厂。苏名溪的后人苏莲舟任厂长，就成为了阳江食品厂的前身。
阳江炒米饼是阳江特产，但其实并非阳江独有，广东有一首很流行的儿歌：“凼凼转,菊花圆,炒米饼,糯米团,阿妈叫我睇龙船,我唔睇,睇鸡仔,鸡仔大,摞去卖,卖得几多钱?卖得三百六十五个仙。”说明广东都有春节做炒米饼的习俗。
阳江炒米饼，与广东其它地方炒米饼不同的地方，就是不用黄糖加水煮成糖胶来和粉，而是直接用白糖来和粉，然后用饼模来做。饼模是木制的，上面刻有祥禽瑞兽，花草树木，还有福禄平安之类的文字，现在应该有人作为一种传统的民间木刻艺术品来收藏了。
