相傳在南北朝時，有個叫潘子良的人，在今桃江縣城西南二十八公里處的一個山崖下煉丹修道，成仙后，他煉丹用過的水格外清白。

有一天，桃花仙子駕雲周遊到此，被其吸引。便情不自禁地下降雲頭嬉戲於井旁，並將髮髻上的一朵桃花丟在井水裡，誰知桃花落在沾滿仙氣的井水裡翻騰，一變十、十變百。隨溢出的井水順流而下，使整個溪流長年浮滿桃花。

另外，王母娘娘一侍女看上溪邊一石匠，便私自下界與其結為伉儷。臨產時被王母娘娘發現，生產後不得不被迫返回天庭，劃分時，侍女送丈夫一對玉簪，囑其插到溪流兩岸。玉簪便釀成了桃樹萬棵，這條溪流也就成了桃花江。侍女生下一男一女也像其母親一樣面似桃花，美若天仙。兩岸女子經溪水沐浴，亦各樣嬌美。

包公斬龐國舅

桃花江是尤物窩，桃花萬萬朵，比不上尤物多……”三十年月，着名作曲家黎錦輝先生一曲《桃花江是尤物窩》，使桃花江名揚天下。簡直，桃花江是一個山美水尤物亦美的地方，這裏山水如畫，景物優美，天氣宜人，是湖南省十大旅遊區之一。往後，桃花江有人世瑤池之美稱。

優美如畫桃花江 桃花江起源於寧鄉縣的龍塘，進入桃江縣境內的子良岩后，才稱桃花江，長27.8公里，有83道彎，穿山走谷，在桃江縣城桃花江港處，坎坎流入資江。

桃花江上游奇峰怪石，急澗瀑布相連，每當春季桃花盛開之時，中下游兩岸山水相映，一片火紅，大有“絢麗芳菲，其色甚媚”的萬千氣象，令人留連忘返。