相传古时候，洛阳府有一位姓蔡的妇人，怀有身孕，出外寻夫。一天，来到洛阳河，滚滚河水拦住去路，妇人犯了愁，站在河边，哭哭啼啼，对天许愿，“将来如生一子，升官为民，定造洛阳大桥”。后来，这个妇人果然生了一子，其子刻苦攻读，中了状元。于是替母还愿，要建造洛阳大桥。可是，这个姓蔡的状元为官清廉，两袖清风，拿不出造桥的钱来。他求皇上，皇帝不答；他求财主，财主不理。这时候，他含着眼泪，身背榜文，四处募捐，字字是血，声声是泪，感动了天上的牡丹仙子。这一日，洛阳河畔，突然展出一棵白牡丹，花下站着一白衣美妙的女郎，旁边立牌写道：“谁人以元宝击中牡丹，便将花下的女子许配与他”。这一下轰动了洛阳城里城外，顿时人山人海。那些地主豪绅们一见花下美女，神魂颠倒，垂涎三尺，拼命地以元宝击花，元宝落了一大堆，却没有一个击中。落地的元宝全让蔡状元拿去造桥。三天下来，元宝车载船装，牡丹仙子估了一下，造洛阳桥已绰绰有余，正要收法，忽然，仙人吕洞宾云游至此，也被少女的美姿迷住，他取出一粒金丹，变成一个元宝，一下子击中牡丹。倾刻，花瓣纷飞，女子也不见了。吕洞宾如梦初醒，方知道这是牡丹仙子显形。这件事被玉帝知道，玉帝勃然大怒，说牡丹仙子触犯天规，说吕洞宾贪慕红尘，双双被打降到凡尘。
美丽善良的牡丹仙子来到人间，走遍了三山六水，都不满意。她走呀走呀，不知跨过多少水，越过多少山。这一年谷雨时，她来到了巢湖的银屏山，登上山头，看到巢湖两岸山青水秀，美不胜收。她拿定主意，永留此地，化为一棵白牡丹落在银屏山中的仙人洞口绝壁上。突然，花开五朵，雪白如银。男女青年惊叫道：“白牡丹来了，白牡丹来了!你们看,花开五朵, 今年一定是五谷丰登。”果然不错，那一年风调雨顺，五谷丰登。
谁知白牡丹的艳姿惊动了许多人。巢州知府莫大老爷，带领妇人、儿子、小姐，前呼后拥，前来观看牡丹花开。一下子迷住了，半天才叫出声来：“奇妙!奇妙!好花!好花!”正在这时，花瓣一下子全收起来了。莫大老爷把眼珠子一翻，打起了小算盘，他突然大声喊道：“来呀，把牡丹花给我连根挖掉，不准碰断一片叶子，带回去给我栽到我家后花园里。”
一个家丁端来一只凳子，站上去刚要动手，不料，牡丹突然朝上长了一尺。换个高凳，伸手再摸，牡丹又向上移了一丈。吓得众人目瞪口呆。莫大老爷叫人架起云梯，他脱下长衫，卷起袖子，手扶梯杆，脚踩梯档，一搭一搭向上爬。他爬了一搭，牡丹就向上长了一尺，他爬了两搭，牡丹就向上长了两丈。莫大老爷贪花心不死，还是一股劲地往上爬，一直爬到云梯顶端，牡丹花已经从仙人洞长到了悬崖峭壁上，离地数丈多高了。四周浓雾滚滚，寒气袭人，莫大老爷不禁打了一个寒颤，顿时感到头昏眼花，腿软发抖，心惊肉跳起来。他连忙下梯。不料一脚落空，一个倒栽葱，跌得七孔流血，眼睛直往上翻，不一会儿便呜呼哀哉！
从此以后，美丽的白牡丹，经风沐雨，在仙人洞口的峭壁上生根开花。每年谷雨季节，勤劳、善良的巢湖两岸乡民都唱着山歌，络绎不绝地前往银屏山观赏牡丹花。