传说湖光岩原来没有湖，那里有两条村庄，宁村和托村。宁村有一位年迈的老人和儿子相依为命，儿子打柴不幸摔死，老人伤心欲绝。后来，出现了一头小白牛，帮助这位老人耕种，地里自动长出庄稼和粮食，老人才免于被饿死。
一年天大旱，白牛给老人送食物，被村民发现，村民宰掉白牛充饥。老人早已将白牛当成自己的亲人了，知道白牛被杀后，伤心痛哭，把村民分给她的牛肉扔回去。牛肉却腾空飞向村外，老人追了上去，差点跌倒。这时，天上降落一根竹枝给老人。老人追到村外桑田边，雷电骤起，天崩地陷，大雨滂沱，眼见村庄就要被淹没。老人不忍村民丧命，情急之下，把竹枝插入田中，雷电顿时停息，洪水减退，只剩下一片清丽湖山。
