元朝末年，盗贼横行佛山，他们常常乘舟从汾江而来，大肆抢掠。乡人在灵应祠前祈祷北帝保佑。果然，贼船常常过半倾覆。

　　不久盗贼用妖术贿赂僧人，用秽物弄脏庙堂，神灵不再显灵。于是他们入境掠夺，烧了庙宇泄愤。但是，他们的暴行，遭到了北帝的惩罚。过了几天，那个接受贿赂的僧人暴病而死，贼也败亡，真是因果报应啊，于是乡人重新修建了祖庙（灵应祠）。

　　清道光十九年（1839年），老老实实做生意的伍耀男被朝廷命妇郑一嫂诬告，于是到北帝面前痛诉实情，后来又得到时任两广总督的林则徐秉公办案，使其得以平反，并革除了郑一嫂的朝廷命妇资格。为了答谢北帝，其子伍汝瑞于清道光庚子年（1840）敬奉了一块“天理昭彰”匾额，以答谢北帝和林公秉公断案。