古老的時候，「鶴樓古梅」原址是個磚瓦廠，蓋巍寶山寺院的磚瓦就是由這裏燒出來的。
傳說，這瓦廠剛剛建立，好不容易才築起個大窯子。不知是瓦窯火太大，還是泥土不合，第一窯瓦才燒了十天十夜正好一半工夫的時候，突然大窯門上面拉開了兩丈多長的裂縫，裂口越張越大，眼看就要倒下來。到了這個地步，幾十個靠做瓦養家活口的師傅也只得老遠站著，眼淚巴巴地等著瓦窯倒塌。
誰料就在半面大瓦窯要塌下來的一霎時，大窯門裏突然出現個一丈多高的人影，一雙手托住塌下來的半面瓦窯，只見他往上一舉，半面瓦窯就穩穩當當地合上去了。隨著一股青煙升上天空，人影不見了，瓦窯卻復了原，窯火還在熊熊燃燒！一群瓦匠都驚呆了，等清醒過來，聽到的是一陣悠揚的笛聲。人們朝笛聲響處望去，只見遠方飄著一朵祥雲，雲裏呈現著一個慈祥的老頭，笑盈盈地看著這座大瓦窯，幾十個瓦匠不約而同地跪了下去，朝著老頭就拜，一直拜到祥雲不見了，方才站起來。從此，這座瓦窯一直順順當當，磚青瓦白，無破無裂。
不覺到了臘月二十八，這二三十個瓦匠個個領了工錢，收拾好了行李，等著吃了早飯，就要趕回家裏過年。
誰知，大家剛端起飯碗，突然聽到有人在山頭上大叫：「一碗水村子失火了！」三十多個瓦匠幾乎同時丟下飯碗，沖出竈房門一看，只見對面叫一碗水的村子濃煙滾滾，也沒有人指揮，就一窩蜂地向著濃煙起處沖去。一碗水村裏的男女老少，由於救火的勞力不足，眼見火勢不斷上升，到了無可奈何的時候，突然趕來三十多個精壯的瓦匠，好像來了救星，高興得無法形容。這夥瓦匠一到就拼死爬上房屋，拼命救火。不到一個時辰，那熊熊大火就被撲滅了。瓦匠們回到瓦廠，誰也不想吃飯，只想靜靜地坐一下，或躺在地上睡一覺。他們你看著我，我看著你，都忍不住大笑起來。只見有的燒焦了頭發，有的被火燎掉半件衣裳，有幾個把腳也摔破了，頭也撞破了，一個個都變成了小醜。誰也沒有力氣再回家了，只好休息半天，臘月二十九再趕回去。
下午，大家正在吃飯，突然一個瘋老頭闖進竈房裏來。這夥瓦匠都是窮苦人出身，誰也不嫌棄這瘋老頭，給他遞了個位子，又盛了一碗飯給他。這老頭也不客氣，接過飯來就吃，他一面吃飯一面瘋瘋癲癲地扯東說西。但從他的言語中可以聽出他家裏很窮，無兒無女，老伴又在病中，三十晚上的年飯還沒著落。這些瓦匠也都嘗過三十晚上沒有米的滋味。於是，掌火師傅帶了個頭，各人都拿出點碎銀子，給了老頭，叫他回去買糧吃。可這老頭說，他的家很遠，今天回不去了，瓦匠師傅就留他在瓦廠裏住了一夜。晚上老頭瘋瘋癲癲地說，趁瓦匠回去過年的這幾天，他要借瓦窯燒一窯。只惹得眾瓦匠一陣哄笑，誰也不把這當作一回事。可這老頭一直嘮嘮叨叨地就是要借窯子。掌火師傅為了順老頭的氣，順口答應了句「好」。他才再也沒說什麽，就睡著了。
第二天一早，瓦匠起來吃飯的時候，瘋老頭還在好睡，也沒叫醒他，給他留下了一份飯菜。掌火師傅臨走時，悄悄囑咐留下守瓦廠的人，如果瘋老頭不走，也別趕他，但是要防著他偷東西。
瓦匠們回家過了年，到大年初二就約好一同回瓦廠來。剛到磚瓦廠，都驚呆了。只見瓦窯前堆著幾大堆青磚白瓦，看上去足有十來萬匹。大家跑到房裏一看，瘋老頭不見了，只是地上放著一小堆碎銀子，看上去和大家給瘋老頭的差不多。
那守瓦廠的憨厚漢子，這時還在床上打著鼾聲，睡得正香呢！大家連搖帶叫把他弄醒，他還伸了個懶腰，問道：「你們怎麽還沒回家過年？」大家聽了，哄笑一通，問他瓦窯前的瓦是哪裏來的，他也莫名其妙；叫他出去一看，也驚奇得半天說不出話來；問他瘋老頭呢？他也不知道，只說大家一出門他就一覺睡到現在了，又惹得大家哄堂大笑了一通，才告訴他今天是大年初二了，你足足睡了四晝夜。他還呆呆地望著大家，懷疑眾瓦匠是在哄他。
後來，大家到瓦廠去看看，他們做下的泥坯仍然碼在那裏，一匹也不少。到窯子裏一看，還有三十二個剛燒好的粗瓷大碗放著，恰好每個瓦匠分一個。窯子正中間燒好兩個四方花盆，口合口地放著。掌火師傅一下醒悟過來，脫口大叫：「呂祖又顯聖了！」大家一聽呂洞賓顯聖，一起跪了下來，朝天就拜。這時耳邊又響起了悠揚的笛聲。人們為了報答呂祖救窯施瓦之恩，就在這裏建了座「陪鶴樓」，裏面塑著個高大的呂洞賓泥像，盤坐在一只飛著的大白鶴上。
陪鶴樓、看梅亭和古老的大梅樹，同時輝映在中間的那一池清水裏，構成了一個獨特的景色叫「鶴樓古梅」。
然而百丈鶴樓今仍在，古梅卻不知何處去了。現在在世的老者，也都只見過三尺來高的一截幹梅樁。傳說，這棵古梅是三國時孟獲的哥哥孟優在這裏隱居時栽下的，樹態十分精神，開出來的花有銅錢那麽大。
