明末清初，玉环海岛上十分紊乱，民与贼分不清楚，官府有令：将岛上的人全部迁到内地，不准住宿人，以后岛上若有人，一律当做贼办。因此玉环岛荒无人烟。直至清雍正三年（1725年），政府号召可以垦荒，所以内地人到玉环岛上垦荒。镶额再次垦荒，首先林家祖先从永嘉巨溪赤塘来的，从龙湾大岩头门上岸，以生锣开，凡是锣声听得到的地方都为自有。林家祖先考察过好几个地方，认为镶额土质最重，认为土重丁旺，故定居在镶额。接着黄家祖先（…普青里敦），第二年潘家祖先也到小额来。因为潘家祖先原住林家的东首岙，所以林家祖先邀其同住一地，仍以东首给潘家住，田、地、山要哪给哪。到了林家第三代时，王家祖先原是个小孩到林家做牧牛童。这小孩聪明听讲，有了好几年，牧童渐渐长大成人，主家认为这小孩很好，就将自己女儿招他入赘，过了十数年后，拆赘出来，岳父家给女婿田、地、山作为女儿嫁妆。林和王是祖婆亲。
开垦二十年后，人口突增数十倍，到了乾隆十年（1745年），这年农作物遭受天、虫、病灾的损害，收成尽微，大家非常恐慌，一班年龄较大老人商量，到温岭新河做卦，卜得后山半山腰上有一个岩洞，立神祭拜，地方太平、人口平安、五谷丰登。老人回来这么一讲，大家又在一起商量，接着男女老少一起出动，劈开一条荆棘丛生，伐掉参天树林，直到岩塔下，确有一个岩洞，在一个高大岩壁中带有竖直长形的洞，此岩似龙头，背后山像一条龙。大家就在岩壁下，洞前挖开地平，并用草轩搭成一个小小庙宇。供人祭拜，并把洞口四周残遗下来的兽骨或古代未埋葬人骨等全部收拾，送放在洞下右首的岩下，所以这岩号称人骨岩。既建庙立神，大家议定庙名，取名定时等：龙岩宫、龙岩洞，花粉娘娘。三月三花粉娘娘寿诞，你若在此拜祭，虔心虔意、小心谨慎，十分显灵，求子得子，求财得财，求医祛病，消天解厄，求婚得婚，和睦相子。可真是有求必应，所以香客日渐兴旺，特别坎门一带香客最多。草轩所盖的又小又窄旧庙，还火焚过几次，又遭高岩壁上面水流下，庙内不可住人，实无办法可想。
直至光绪二十九年（1903年），又认了陈家祖先、周家祖先，人口又增到几百。老人发起将庙重建，当时经济有限，用什么方法把庙重建扩大呢？大家一致认为，花粉娘娘，有求必应，特别坎门一带人民最相信，那里经济实力雄厚。到坎门一带，收来一批钱物，用我们自己的人工，就可以建庙，大家一致认为这完全可行。发动众人，或邀来隔壁村民，首先到坎门一带，后迎遍玉环江南，所到之处，朝善男信女不计其数，真是轰轰烈烈，其中还有很多惊险、动人、可歌可泣的真实动人的故事。
