神龙元年(705年)正月，宰相张柬之被贬岭南新州，杜甫、杜位二叔侄出临安游历名山大川至惠州，特取道前往拜访。
张柬之请他们去龙山国恩寺朝拜六祖。
在龙山国恩寺，了解了许多六祖惠能的奥秘，深知五祖把秘诀和袈裟金钵传授给了惠能，惠能才是真正的佛教禅林第六代宗师。
步出龙山国恩寺后，在龙山脚附近，杜甫、杜位、张柬之无意之中听到当地民众说及六祖惠能从曹溪回到新州的另外一种版本：
六祖自得五祖传以衣钵后，更潜心佛门，一心想设坛讲教，普度众生。他立志在故居新兴县建一所寺院，传教佛经禅机。但要建一座寺院，不是说说那么容易的，非要一万几千两白银不可。
为了这件事，六祖惠能日又思夜又想。有一晚，他望着五祖传给他的衣钵发呆。在朦朦胧胧之中，只见观音菩萨飘然地来到他的面前，对他说：“你现住的地方后边有一座山，叫龙山。沿着山脊一路行，见到一个镬底的山坑处，掘至二尺半深处，那里有一罐白银，够你建寺用了。不过，在挖出白银的坑里，你要记住种上一棵荔枝树，你千万要记住。”
六祖正在为建寺院的事忧愁，听了观音菩萨所讲，一时高兴起来，禁不住手足舞动，把台面的那盏油灯也碰落地下。“咣啷”一声，把六祖从梦中惊醒。原来是南柯一梦。
但他一想，又不像做梦，因为观音菩萨的吩咐他还记得很清楚，很明白。于是，第二天一早，六祖惠能火速赶回去，按观音菩萨所指，找到那个地方。嘿!果然他挖出一罐白银。
六祖高兴至极，按照观音菩萨的吩咐，精心地选了一株荔枝树苗，并亲手在那个地方种下。后来，龙山寺建好了，而六祖亲手种下的那棵荔枝也枝繁叶茂，每年都结满了荔枝。那些荔枝不但壳薄肉厚，而且清甜爽口，附近的民众都很喜欢吃。于是，很多人就开始跟着种这种荔枝，而且种的人越来越多。
过了很久，州背村的进士黎常从福建任监察御史卸任归乡时，又把福建一种叫“状元红”的荔枝种也带回来种。可供种植的荔枝品种更多了。于是，种荔枝的人也越来越多。一时间，“新兴荔枝”便远近闻名，一传十，十传百，越传越远最后竟传到京都，连皇帝都知道。皇帝听说新州的荔枝是六祖所种，想必不是平常之物，于是传下圣旨，要新县向朝廷进贡荔枝，并派去“钦差”督运。荔枝送进皇宫后，皇帝立即传谕妃子及宫人前来品尝。她们一边吃一边围着皇帝说：“从来都没有吃过如
…。。