芦山铜鼓庙有多处特色之极的掌故，这里的建庙原因颇为有趣，相传，在唐朝时期，一位叫马遵的佛教僧人，曾来到芦山开山立寺，此地气候宜人、环境优美，遂决意在此地建立寺庙，以此弘扬佛教文化，后马遵于该地修行三年，并建造了一座寺庙，供信徒膜拜礼佛。
芦山铜鼓具有非常独特的声响，据记载，这是当地居民从铁钱中筹集资金打造而成的，当时，为了让寺庙更具意义，因此铸成了这台铜鼓，象征着村民对于祖先的尊重和对佛教文化的热爱，如今的铜鼓直径约为1米，高约0.7米，鼓身刻有许多古文字和图案，其中包括佛经、佛像、菩萨、龙、凤等等。
芦山铜鼓被誉为“中国铜鼓之最”，其奇特之处在于音色方面，铜鼓敲击后会发出悠长且有力的声音，震耳欲聋，芦山铜鼓的音量更是如此，被誉为能够震动百里的声音，据说这种音响可以在几千公里外感受到，可以用作发动地方民众起义的军令，为了确保铜鼓的完整性和安全性，芦山县曾投入大量人力物力来维护铜鼓周边的建筑和环境。
除了上述，芦山铜鼓庙还保留了许多有价值的文物和历史遗迹，其中较为著名的是关于铜鼓的制作过程，据传，朝廷在汉武帝时期铸造了铜鼓，以纪念他在打败匈奴的战役中取得的重大胜利，当时铸造铜鼓需要大量的铜材料和工人数目繁多，因此必须征调大量百姓进行劳动，这些活动耗去了巨大的人力物力和财富。
清朝著名诗人杜甫曾在游览期间访问了芦山铜鼓庙，当他看到庙内的铜鼓时，被其宏伟壮观和美丽的外表所震撼，于是创作出了著名的《登楼》诗句：“铜鼓声咽金波阔，九州生气恃风雷。”
除了这些充满趣味的掌故之外，芦山铜鼓庙还包含其他众多精彩的传说和故事，关于铜鼓制作的部分，据传说，当朝廷着手铸造铜鼓时，因为技艺还不够精湛，铜鼓屡次破损，为了减少民力和物力的损失，朝廷命令已损坏的铜鼓归于芦山铜鼓庙，同时表达对他们个人失误的歉意。
除了历史上的掌故之外，芦山铜鼓庙还有很多与唐代著名诗人杜甫相关的历史资料，据说杜甫曾在路过芦山时造访此处，并在拜访的过程中有幸观赏到了芦山铜鼓庙，当他看见这座巍峨壮丽的庙宇时，对其景色赞不绝口，并写下了一首充满诗意的诗句：“丹青难绘天下景，锦瑟无端五十弦，凭君莫问前朝事，自古英雄多寂寞。”这首诗传达了杜甫对于中华传统文化深厚感情的同时，也寓言了人生在世的孤独和渺小，这些故事增添了芦山铜鼓庙的魅力，使其成为吸引众多游客前来观赏和探索的文化胜地。