传说，北海有一条蛟龙，她有三个孩子，分别是灵龙、青龙、黄龙。
一年春天，正是农耕的时候，偏偏大地旱得开裂。农夫们祈求东海龙王行雨，可是东海龙王敖广却说：“给我三头最好的猪，九十九对儿童男童女，我就给你们施雨。”
这件事传到了灵龙、青龙、黄龙三兄弟的耳朵里，他们决定去施法行雨。路上，他们碰上了敖广的三太子小白龙，小白龙有心捉弄他们，喝问道：“畜生，要赶去哪里？”青龙、黄龙一听气得就要发作，灵龙拦住兄弟，把身腰一弓，彬彬有礼地答道：“我等不才，特赶去行雨。”
小白龙手举钢叉，向灵龙刺去，在灵龙的胸口上叉了一叉，疼得灵龙眼冒金星，彪悍的灵龙嘴一张，把小白龙吞到肚子里去了。灵龙平静地说：“我们赶路吧。”说完，他们三个匆匆飞过，去行雨了。
东海龙王敖广恼羞成怒，但又不敢去找这兄弟三个算账，干脆上了南天门，向玉皇大帝哭诉道：“玉帝，我的三儿子小白龙，被那灵龙活活吞掉了！”“什么？”玉帝顿时冒了火，“居然敢吞食三太子？托塔李天王！速速将他们捉来！”
托塔李天王带着天兵天将冲下南天门，捉住了正在行雨的三兄弟。玉帝一把抓住他们三个便往下界砸去，砸到了不同的地方。从此，三条龙便各踞一方。青龙和黄龙，一个在长江北，一个在长江南。恰巧，小秦王路过江边，不由得嘀咕起来：“老天啊，将来两条龙碰头了，不是挡住水源了吗？”说完，小秦王拔出宝剑，对着青龙的鼻孔插了下去，青龙顿时鲜血喷涌，发出撕心裂肺的吼声。这吼声穿透云层，传到灵龙那里。灵龙猛地一蹬，“呼”地蹿了起来，可是不知怎么的，灵龙的肚子一下子胀开了！从里面掉出无数形状各异、璀璨斑斓的石头来！原来，小白龙被灵龙吞下以后，慢慢变成了五彩斑斓的石头！当灵龙拼命挣扎的时候，石头撑破灵龙的肚子，都掉了出来。
就这样，从灵龙的这座山到青龙所在地的路上，都铺满了五彩斑斓的石头，而这些犹如零散的雨点，后来人们就将其称为雨花石。