关于衢州搁袋饼的历史，有一个流传久远的传说。相传孔子第四十八代嫡长孙、衍圣公孔端友当年为保护孔氏家族，率领近支族人，随飘零的宋氏南渡，颠沛流离至衢州境内。

到达衢州后，孔氏族人已是饥肠辘辘，疲困难挡。

恰好路过一村夫家，村夫得知该浩浩荡荡的队伍是孔氏族人后，便将他们请回家中，升起炉火，做饼招待他们。由于天气寒冷，面饼只能一边烤一边吃，面饼中的肉是由五花肉剁成，肥瘦相间，香而不腻，加上特制的香葱辣椒等拌料，竟是香飘四溢，美味异常。孔端友在衢州安家后，十分喜爱吃这样的烤饼。衢州人舌尖上的味道——烤饼，一直流传至今。