在洞庭湖口，坐落着历史悠久的岳州城，它面对着烟波浩渺的洞庭湖，背靠着滚滚长江，自古以来就是江南的军事要塞和文化重镇。相传在三国时期，东吴的鲁肃在此建立了阅兵台，用以操练水军。到了唐朝，燕国公张说在阅兵台的基础上，建造了气势磅礴的岳阳楼。由于岳州曾是建昌郡的所在地，岳阳楼与武昌的黄鹤楼、南昌的滕王阁并称为“三昌古楼”，也被誉为江南三大名楼。
然而，历经战火的洗礼，岳阳楼最终化为一片废墟。直到宋仁宗时期，滕子京出任岳州太守，他决心重建岳阳楼，以此振兴民心。重建岳阳楼是一项浩大的工程，不仅需要大量的人力物力，更需要一位技艺高超的总设计师。滕太守立志要让岳阳楼超越以往，成为天下名楼之首，因此对总设计师的人选极为挑剔。
当时岳州城中有一位富豪，他想借此机会炫耀自己的财富，同时捞取一些利益。他多次带着厚礼去见滕太守，希望能够成为总设计师，但滕太守并不看好他，让他屡屡碰壁。富豪因此怀恨在心。
一天，滕太守正为找不到合适的总设计师而烦恼时，有人通报说有一个自称“回道人”的老道士求见。滕太守立刻请他进来。只见这位老道士身穿朴素的青布衣，脚蹬蒲草鞋，长须飘飘，背后背着宝剑，手持拂尘，腰间挂着两个大铜钱，显得仙风道骨。
滕太守好奇地问：“道长尊姓大名？仙居何处？今日来访有何指教？”
回道人回答：“贫道四海为家，无欲无求，今日见大人愁眉不展，想必是遇到了难题，不妨说来听听。”
滕太守叹道：“道长真是慧眼识珠。我自上任以来，一心想要重建岳阳楼，以振民风，但如今万事俱备，只欠东风——缺少一位能工巧匠来担此重任。”
回道人听后，哈哈大笑：“原来如此。贫道自幼研习土木建筑，无论是宫殿楼阁还是寺庙台观，都曾亲手建造。如果大人不嫌弃，我愿意担此重任。”说着，他从袖中取出一张图纸，上面画着飞檐斗拱，气宇非凡的设计图，滕太守看后大喜过望。
当天下午，滕太守亲自带领回道人来到岳阳楼的废墟，召集了所有的工匠和筹款筹料的绅士，当众拜回道人为总设计师，授权他指挥重建工程。回道人也不推辞，立刻拿出图纸，分工派料，工程随即启动。
起初，工匠们干劲十足，工程进展迅速。但几天后，他们开始显得无精打采。原来，滕太守为了重建岳阳楼，一下子召集了三万多工匠，导致物价飞涨，尤其是蔬菜，价格翻了数倍，到最后竟然买不到了。那个富豪见有机可乘，便煽动工匠们向回道人索要菜。回道人微笑着说：“你们想要菜吗？别急，跟我来。”
他带着一筐木匠刨下的刨花，走向湖边，众人好奇地跟了过去。回道人将刨花倒入湖中，不一会儿，刨花竟然变成了一群白花花的小鱼，这些鱼长得又薄又长，尾巴像丝线一样，与刨花无异。工匠们称之为“刨花鱼”，百姓则称之为“毛花鱼”。这些鱼成千上万，一网就能捕获千斤，既好吃又便宜。从此，工匠们再也不愁没有菜吃了，岳州的百姓也能常常品尝到刨花鱼的美味。
富豪的计谋没有难倒回道人，他心生不满，又想出了一个坏主意。他用金钱买通了铁匠班头，一夜之间将铁匠们全部带走，还将已经打好的钉子全部丢进了湖中。他心想，没有铁钉，看你回道人如何修建岳阳楼。然而，回道人早有准备，他让木匠们用上等木料制作了数千个榫头，通过榫卯结构，不用一根钉子就将楼顶搭建起来。湖风吹过，榫头干燥后，整个楼顶便连成了一个整体，坚固无比。从此以后，岳阳楼的修建都采用了这种木结构的方法。
富豪两次未能难倒回道人，又暗中派人在岳阳楼前的偃虹堤上挖了一个大口子，企图让洞庭湖的大风浪摧毁楼基。回道人得知后，微微一笑，原来他早已召回了那些外逃的铁匠。他让铁匠们在岳阳楼下的湖滩上铸造了五个重达一万多斤的大铁枷。这些铁枷的四个角像燕子尾巴一样向四下翘起，中心孔里栽上木柱，木柱间用篾片编成栅栏。风浪打来，四个铁枷角自然将浪头分向两边，竹栅栏将浪花拦在楼外，风浪再也冲不倒楼基。至今，那几个铁枷仍然摆放在岳阳楼下的沙滩上。
工程接近尾声时，回道人邀请滕太守登上岳阳楼，将修建过程中的点点滴滴一一讲述。滕太守听后非常高兴，立即命令赏赐众工匠，并询问回道人关于地方绅士作梗的事情。回道人便揭露了那个富豪的所作所为。
滕太守听后大怒，将富豪召来痛斥：“你为富不仁，做出这等伤天害理之事，今日我必须治你的罪！”
富豪跪在地上，连连磕头求饶。从此，他再也不敢捣乱，岳阳楼的修建也顺利进行。
岳阳楼竣工之日，滕太守为了庆祝回道人的功绩，在楼上设宴。席间，滕太守拿出数百两银子要送给回道人，但回道人坚决不受，他说：“请将这些银子赏给贫苦之人吧。”说完，他突然化作一阵清风消失了。在场的人都惊讶不已。这时，天上落下一张纸，上面写着：“龙门吕洞宾，帮修岳阳楼，凡人不识我，称我回道人。”滕太守恍然大悟，原来“回”字是大口套小口，如果将小口移到大口上面，不正是“吕”字吗？他让人找来吕洞宾的画像对照，果然与回道人一模一样。
为了纪念吕洞宾，滕太守命人依照画像雕刻了一尊吕仙像，供奉在岳阳楼内，至今犹存。
