王母娘娘手一指，红桃仙子和碧桃仙子变成了两座山峰，即现在的双女峰。王母娘娘和两位仙女腾云驾雾回琼台去了。刘晨、阮肇走了半月才回到了家乡。村口的那株樟树，离家时只有胳膊那么粗，现在已经是五个人都抱不拢了。
他们打听这个人，人家说不晓得；打听那个人，人家又摇摇头。后来好不容易找到一个须眉皆白的老公公，那老公公才说：“噢！我小时候听祖父说过，村里有两位七世祖公到天台山采药，以后一直没有回来。”
刘晨、阮肇听了大吃一惊说道：“真想不到，山中方半年，人间已七世了。”
刘晨、阮肇回来的奇闻传开了，几百里方圆的老百姓都赶来看望他们。他们用采来的草药治好了千百个人的毛病，还把那支乌药种在药圃里。
说来也怪，只有一夜功夫，那乌药便一变二，二变四，长了满满一园。患心窝痛的人吃了，个个健壮起来。从此“天台乌药”就闻名中外了。
又过了一年，刘晨、阮肇十分想念仙子，于是又千辛万苦地回到天台山桃源洞。这时只见桃源洞口飘着云雾，岩壁上生满苔衣，山谷里百花凋零，一片荒凉，洞中只剩下一些石桌、石凳，再也找不到仙子了。他们寻啊！找呀！找遍了天台山七十二座山峰；他们寻啊！觅呀！寻遍了天台山一百四十四条山涧，还是没有找到。
后来他们又在赤城山碰到那位嬷嬷，才知道因为仙子们私赠乌药，王母娘娘大发雷霆，一怒之下已经把她们罚变成桃源洞边两座石峰了。
他们一听这话，赶紧回到桃源洞，果然见到两座石峰，形如仙子，正痴痴地向溪下方望着呢！刘晨壮怀激烈，悲从心来，对着苍天嚎叫：“啊……”两人跪在地上流下悲伤的泪水……
这就是现在见到的“双女峰”。为了怀念自己心爱的仙子，刘晨阮肇再也不愿意离开这里，就在这桃源洞里住下，日日夜夜陪伴着“双女峰”，辛勤培植乌药，每隔几年，回家一次，为乡亲们治病。刘晨还写了一首诗歌：
一朵莲花吹不去，随风化作天台山，
刘晨阮肇遇女仙，桃源桃花多娇艳。
刘晨阮肇采药天台山，饥肠咕噜咕噜十三天。抓藤取桃作餐欲过山，凝望胡叶青流胡麻饭。翻山越岭山路十八弯，空谷幽兰遇女子二仙。山峦叠嶂仙女喜欢欢，桃源艳遇轻声话呢喃。
雕栏玉砌琼瑶遇娇颜，兴高采烈如故人一般。南边东旁芙蓉帐丹丹，金铃帐角上高高挂悬。佳肴羊脯牛肉胡麻饭，金樽交错豪饮意
…。。