关于明武宗和刘良女相识的经过，有两种不同的说法。《明实录》中记载刘良女是太原晋王府乐工杨腾的妻子。武宗游幸山西时，派人到太原索要女乐，得到了刘良女。武宗喜她色艺俱佳，就从榆林带回了豹房。将刘良女安置在西苑太液池腾沼殿中，号称夫人，俗呼为刘娘娘。
《稗说》则讲述了另一个版本的爱情故事。刘良女是大同代王府上有名的歌妓(讴者或女乐[2] )，武宗曾假扮低级军官出入于王府的教坊，因而得以认识刘氏。当时武宗在教坊中并不太引人注意，别人还以为他只是个普通的军官而已，但是刘氏慧眼识珠，认定他不是个平常人，就对他另眼相看。武宗记住了这个刘氏，后来派人将其接到北京。这就成了后来著名戏曲《游龙戏凤》的故事框架，只不过刘氏变成了李凤姐。
武宗下江南时，刘氏一直陪伴在身旁，多次一同出现在臣民面前。武宗在南京赏赐寺庙幡幢上都要写上自己和刘氏的名字，刘氏也成为武宗一生中最宠爱的女人。
《彤管拾遗》
刘美人，亦称刘夫人，太原民刘良之女，（世称美人名良女，非是）晋王府乐户杨腾名下妓也。正德十二年，上幸大同，驻跸偏头关，遍索女乐于太原。美人偕众妓杂进，上遥见美人，悦其色。及聆讴，大喜。遂从榆林还，再召之，载以归，命为美人，大见宠幸。初居豹房，后渐入西内专寝。饮食起居，必与偕，言事辄听。左右或触上怒，阴求之，辄一笑而解。江彬诸近幸，虽甚贵倨，见必触首，以母事之。呼之曰刘娘娘。后上将南征，阴移美人至潞河，约驾先发，而随以他舟迎美人。美人脱一簪赠上行，且以为信，曰：见簪而后赴。上藏簪衣间，过芦沟，驰马失簪。大索数日不获去。及至临清州，上遣中使召美人，美人辞曰：“不见簪非信，不敢赴。”上乃独乘舸昼夜行，傍徨至张家湾亲迎美人，载而南。
（原评曰：此千载韵事，且出自《实录》，而旧史以异词讳之，殊不必然。）当上发临清时仓卒，内外从官无知者。既而有数人追及之，亦寥甚。民船争榜，见上舟，不能避，抵触讥诃。湖广参议杜文缵，卫上舟过，怒止之，入其舟，夺一妾行。及上至扬州，每以数骑猎扬州城西，止宿上方寺。后遂无厌，屡出猎，驰突不测，美人谏乃止。时又称为夫人，自上方寺至南京所临寺观，幡旌锦绣，梵贝夹册。有为上所锡赉者，悉署上与夫人刘氏名字其上。正德十六年，世宗入嗣，用南绝事王纪言，以为至尊别号，媟嫚启侮，不可示天下后世。自今南北凡大行皇帝御驾所临驿置寺观有书“威武将军镇国总督及夫人刘氏”名者，悉令撤去。
《明实录·明武宗实录·卷之一百六十九》正德十三年十二月[……]○上驻跸太原 初 上在偏头关索女乐 于太原有刘良女者 晋府乐工杨腾妻也 以讴进 遂当上意及自榆林还 复召之 载以归 自是大见宠幸 饮食起居必与偕左右 或触上怒 阴求之 辄一笑而解 江彬诸近幸皆母呼之曰刘娘云[……][3]