吴家山有三个山头，东部山头孤立突起，山峰浑圆，海拔71.1米，名为道冠山(道观山);中间山头为主峰，海拔72.04米，名为吴家山(古称壶盖山或湖盖山);西边还有一座小山头，与前两个山峰合称吴家山。

这里流传着许多有关吴家山的美丽而神奇的传说。

传说一:相传，很久以前，这里丘岗湖泊星罗棋布，就是没有山峰。夏秋涨水之季是天水相接白茫茫，冬春落水时节是百川争流黄花地。人们靠丘岗围垸而栖，靠种粮和渔猎为生。但是，泽国水乡就怕涨大水，要是大水一来，连个逃生的山峰都没有，要是在这千里平川的泽国水乡，有几座成片相连的山峦就好了。如果大水来了，丘岗围垸被淹，还可以乘船逃到山上去。说来也巧，这大水真的来了。

一年夏季，乌云密布，接着雷鸣电闪，狂风暴雨，接连三日，昼夜不停，湖水猛涨，一场特大水灾来临。房屋被淹，死者不计其数。船上渔民正在绝望中，只见云雾中一位白须老道骑着一只仙鹤下来，那白须老道摘下帽子抛向湖中。瞬间，湖水中呈露一座浑圆的孤山。后来人们把东边这座浑圆的孤山叫做道冠山(道观山)。接着，老道

又将随身携带的茶壶盖投入湖中，渐渐地湖中升起一座形如茶壶盖的山峰。后来人们就把中间最高的山峰叫壶盖山(亦名湖盖山、吴盖山)。紧接着，白须仙道又从茶壶里取出几片茶叶撒入水中，只见湖中又升起几座山丘，后来人们把这山丘称为小山头。一会儿，云开日出，风平浪静，渔船靠岸，炊烟四起。白须仙道眼见民众得救，便乘仙鹤远去。

传说二:相传很久以前，这吴家山并没有名字，有一天，一位姓吴的道人为寻仙境宝地，下峨嵋，出三峡，顺流东下，来到这个山丘。登高远望，只见紫烟四起，沃土千里，顿时决意留在这山上修身养性。后来在中间一座山峰上留下一块放过雨伞的石印和一双登天的脚印，从此，这座无名山以道人的姓起名为吴家山。仙道在东边山顶修建了一座道观，后来人们就把这座山取名道观山。

传说三:相传大禹治水来到云梦泽畔。突然，乌云压顶、狂风大作、暴雨倾盆，湖上驾船的渔民眼看要遭劫难。只见大禹将一个茶壶盖向湖中扔去，茫茫湖上立刻出现一座壶盖形的山峰。渔民们纷纷泊船上山，躲过洪水灾难。大禹心想，湖上仅有泊船靠岸的山包还不够，还要给乡民们有个遮风避雨的地方才行。于是，大禹索性把自己携带的雨伞也变成了东边的一个山包，后人为纪念大禹治水的功绩，就把这座山峰取名为壶盖山(吴家山)，把东边的一个山包取名为道冠山。

传说四:相传有一个吴氏商贾每年驾船来到这里，总是为洪水和急风暴雨而犯愁。有一天，天下着滂沱大雨，狂风大作，他把船靠近山脚下向天发誓:“如果苍天保我行船平安，我将不惜重金修座神庙盖在山顶。”后来，这吴氏商人真的将自己积攒的所有银两拿出来，在山上修了寺庙。人们便把东边山上取名道观山。中间山峰因这山是湖区最高峰，它像壶盖一样盖在千里平湖上，因而人们又将此山取名为壶盖山(吴家山)。这些传说表达了湖区人民对治理水患的期盼以及对家乡的眷恋与颂扬。