日本鬼子从1937年7月开始就对我国发动全面侵华战争，在1938年6月，日军第4骑兵团藤田所部进犯河南鹿邑县城，在进攻县城时，发现这里有一神台，日军认为这是一处军事地点，于是开始进攻此地。

日军用迫击炮开始射击此地，一共发射13颗炮弹，想直接把它炸为平地，然而打出的炮弹一发也没有响，日军很惊讶，以为是炮弹出了问题，于是调转目标，轰炸县城其他地方，连续发了数十枚，炮炮皆响，这种情形让日军非常不安和诧异，于是开始战战兢兢的进入县城，进去后发现县城十室九空，军民都撤走了。

日军来到打了十几发炮弹都未爆炸的神台面前寻找答案，当他们见到原来轰炸的是道教鼻祖太上老君的升仙台，个个面面相觑，他们大都懂得中国文化，不禁大呼：中国的老祖宗显灵了！于是纷纷跪拜请罪。不在进攻此地。

两年后，县城的军民陆续返回此地，老君台的道士也回到老君台。他们发现日军没爆炸的炮弹还留在老君台，在老君台的大殿东墙，东偏殿后墙，和柏树上共12发，其中两发穿过大殿山墙，一发卡在梁上，一发落在老君的神像前，还有几发卡在殿东柏树的树杈上。

2003年9月，在老君殿维修时，工作人员发现一枚已经生锈的炮弹，经技术人员鉴定，此发炮弹正是当时日军攻打老君台的炮弹，这样几十年没有找到的炮弹终于找到了，它也打到了老君台上，只是打到了土里，没有炸。至于日军轰炸老君台13发炮弹无一爆炸的原因至今也没有答案，成为了未解之谜。

而在1983年，日本的一个叫梅川太郎的人来到鹿邑，找到政府说：我就是当年轰炸老君台的那个炮手，当时瞄的很准确，但是连发13发炮弹都没响，不管是偶然因素还是太上老君显灵，都可以证明我们发动的战争是非正义的，我们侵略中国，屠杀人民，罪孽深重，今天我来到这里就是想向中国老祖宗和人民道歉，请求原谅。虽然日本鬼子在中国犯下滔天罪行，但我国人民还是把梅川太郎所立的“谢罪碑”改正“和平碑”，显示出鹿邑人民对和平的热爱和向往。