据传，朱元璋在应天（今南京）登基做了皇帝后，诚恐与他出生入死打天下的众兄弟自恃功高，影响他朱家的皇权，于是苦设计策，建“功臣楼”大摆庆功宴。正当众臣开怀畅饮之际，自身借机悄然离去，派亲信引火烧楼，谋害了众兄弟功臣。刘伯温智谋过人，识破了朱元璋的用心，才得以脱身，免遭劫难。他身为军师，为朱元璋打天下筹划有兵，参与军中机要，看透了朱元璋的人品：“只能共患难，不可同富贵。”为了避祸，他暗自离开京都，从此隐姓埋名，乔装打扮成“吹糖人”的模样，周游名山大川。

    有一年，他从老家青田过雁荡，历天台，慕名来到南海普陀。游览了寺院庵堂，朝拜了观艺音菩萨。登上西天梅岑，但见莲花洋那边有山苍翠耸拔，白石嶙峋。港面上有雾悬浮如纱，瞬时又随风飘移，遮山掩屋，他朦朦然似觉此情此景在雁荡山见赤，于是顿发游兴，决意乘船前去游览。小船到了石牛港，停在蜈蚣峙内侧航船埠头。刘伯温上了岛，行不多久，迎面看见一块石碑，上镌着“福星”两个大字。他心里想：天涯小岛，既称“福星”决非等闲之地。这时雾霾渐散，眼前一片金光闪亮的沙滩，背侧环列青山绿树，景色确实绚丽。于是他又雇个小船，顺着石牛港南下，经过牛角湾，绕过青山角，行到十里金沙，沿途处处风光瑰丽。刘伯温在东沙登岸，耳闻涛声澎湃，面拂轻柔海风，眺望浩瀚东海，不觉心旷神怡，流连忘返。他又来到了乌石塘，这里遍地乌黑发亮、大小不等花纹各异的鹅卵石，使他惊异万分。他席地坐在卵石上静听浪潮拍击卵发出的美妙音响。恍恍然竟手舞足蹈，面对樟州渔村，高吟起“春而种，秋而收，逐其时而利其生；……水而舟，风而帆……而天地之生愈滋，庶民之用愈足”来了。
    离开乌石塘，刘伯温转身来到了白山头，更见此地山气灵秀，奇岩异石漫坡耸峙，有如雄鹰昂首，有像青蛙鼓噪；有似卧佛，有若罗汉……不一而足。四周林木葱茏，繁花似锦。他想，若说普陀山是海天佛国，这朱家尖可是碧海仙山了。刘伯温伫立在白山头灵鹫峰上，地时看呆了，不禁叹道：人生一世，若能居此，大难不用忧，大荒不用愁，这真是“福星”之地。于是他在白山与蜈蚣峙之间，一个青山环列，面临莲花洋的小山岙中择地结茅为芦。从此就在朱家尖稳居下来，不再浪迹江湖。蜈蚣峙山岗上有一座古墓，相传这就是当年刘伯温军师的墓葬，白山与蜈蚣峙之间这个莲花洋畔“桃源”似的水山岙中，现今还居住着放多刘姓人家，据说他们就是刘伯温的后裔。