1938年农历五月初四日，一队“武装到牙齿”的日军从安徽亳州向西开进，直逼鹿邑。当他们行至鹿邑县城东边的营子寨村时，日军“头目”命令所部“停止前进”，并派兵前往侦探“军情”。

当时，鹿邑县城内并没有高大的建筑物，所以，巍峨耸立的老君台更显得“鹤立鸡群”，加上老君台上古柏森森，就非常引人注目。前去侦察的日军士兵返回报告后，进攻鹿邑的日军头目误以为老君台是国民政府的“抗战工事”，就命人在县城东城墙上架上迫击炮，对老君台集中炮击。

梅川太郎受命发炮，第一炮击中了左侧的那个奎星楼，就这一发炮弹就把整个奎星楼炸得粉碎，巨响之后是日军一阵欢呼声。梅川太郎开始掉转炮口，对准右侧那个更为高大的建筑，一炮打了出去，没有听到爆炸声，两炮打了出去，还是没有动静，一连打了十二发，一颗都没有爆炸。进军中国以来，梅川太郎从来没有遇到过这样的现象，身边的日军个个感到纳闷。

此时日军见射向老君台的十三发炮弹一发未炸，甚为惊奇，回过神后看到老君台上没有任何反应，就误以为守卫这个抗战工事的国军部队闻风丧胆，已经望风而逃了，于是就集结部队，向鹿邑县城进发，并径直朝老君台扑去

当这队日军走进明道宫，爬上老君台，看到台上大殿里供奉着“太上老君”，得知这里是太上老君的升仙台时，整个日军队伍哗然，一个个张口结舌，目瞪口呆，梅川太郎更是张大了嘴巴，一句话也说不来。继而全体日军便不约而同，齐刷刷地跪倒匍匐在大殿门前，磕头作揖，并口中念念有词，请求“老君爷”宽恕自己“向老君台开炮”的罪行，并保佑自己能平安回国。

当年，日军打向老君台而未能爆炸的炮弹，有三颗分别被卡在老君雕像的腋下、大殿的梁架上和一棵柏树的树杈上，它们都“保存”了很久很久，其中被卡在树杈上的一发炮弹，直到上个世纪的80年代初期，方才被人取了下来。如今，老君台上的大殿东山墙和那颗柏树杈上，还留有清晰的弹孔印痕和依稀可见的弹洞痕迹

1997年9月19日，梅川太郎最后一次来到鹿邑，和他的战友把从日本空运来的白色方柱日式，方柱四面分别用日文、简体中文、繁体中文、英文刻写了这样一句话：”我们祝愿世界人类的和平”。将和平碑恭恭敬敬的立在老君台前。并在老君像前长跪不起，虔诚谢罪，祈祷中日永无战争，全世界人民永久和平。据说立碑谢罪回国后不久，梅川太郎就死了。