刘氏成为王妃的消息很快传到了她的老家成安，而刘氏的父亲刘黄须当时仍然健在，他得知自己的女儿在宫中很受宠后，便急忙从成安前往刘氏的住所魏宫，想要和自己的女儿相认，在见到自己的"女婿"李存勖之后，刘黄须立即表明了自己的身份。面对这个突然到来的"老丈人"，李存勖便半信半疑的喊来了曾经掳走刘氏的袁建丰，询问他这位老人是否是刘氏的父亲。
袁建丰看到刘黄须之后，便一眼就认出了这位老人，并且对李存勖说道："臣得刘氏时是在成安北坞，当时有一位黄须老人正在保护她，正是这位老人。"当得知刘黄须确实是刘氏的父亲后，李存勖急忙请自己的老丈人坐下，可是就在这个时候，刘氏突然出来了，然后对李存勖说道："妾离家之时，妾父死于乱兵，妾当时伏尸而哭，这位黄须老叟分明是在说谎，他根本不是我的父亲。"
刘氏说完之后，便命令随从将刘黄须拖到宫外进行鞭打，那些随从足足打了刘黄须一百鞭，将这位老人打的多次昏迷过去。而宋代的史学家孙光宪曾在《北梦琐言》中对此事进行记载："刘氏方与嫡夫人争宠，皆以门族夸尚，刘氏耻为寒家，不愿认其父。"
这段话的大概意思是说当时刘氏正在和李存瑁其他几位夫人争宠，而李存勖的其他几位夫人都有着显赫的身家，只有刘氏出身贫微。当刘氏的父亲前来认亲的时候，刘氏不愿意暴露出自己出身贫苦之家，于是便不承认自己的父亲是刘黄须，因为她觉得卑微的刘黄须不配做他的父亲。
