据传，楚怀王，曾经也到此游玩。楚怀王在玩了一会儿之后，感觉十分疲惫，就在此处睡着了。但是楚怀王却做了一个梦，在梦中，他看到了一个有着绝世容颜的美貌女子。这名女子自称是巫山之女，她愿意将自己的枕席让出一半，与楚怀王共享。楚怀王是一国之君，他的身后拥有着三宫六院和无数的佳丽，又怎么会听不出这句话的弦外之音和邀宠之意呢。有如此貌美的女子邀宠，一向贪恋美色的楚怀王又怎么可能不动心呢。于是楚怀王并没有拒绝巫山美女的美意，立即就宠幸了她。巫山美女在走之前，还特地告诉楚怀王：“如果你还想再见到我的话，可以到巫山来找我。朝云与行雨就代表了早晨和晚上。

这故事中的巫山美女就是是天帝的女儿，一个叫瑶姬的神女。她还没有出嫁，就死去了，死后被葬于巫山之中。

巫山云雨因此而来，而人们也往往用巫山云雨来形容男女欢好。