刘子业的姐姐是山阴公主，本名刘楚玉。山阴公主是孝武皇帝刘俊和王宪嫄皇后的第一个孩子，后来嫁给了何戢。在刘宋王朝，刘楚玉被誉为皇室的第一位美女。生的花容月貌，倾国倾城，是个让男人垂涎的女人。
山阴公主刘楚玉很漂亮，也很放荡不羁，她对刘子业说：''陛下后宫有一万多人，而我只有驸马一个人，这也太不公平了！''刘子业于是就赐给她面首（男妾）三十人。即便如此，刘楚玉仍然不满足，她看上了美男子吏部郎褚渊，又向刘子业要求召来侍候她。其实山阴公主的丈夫何戢风度翩翩，仪表和褚渊不相上下，只是年龄小些，人称''小褚公''。公主得陇望蜀，非要褚渊相陪。褚渊是宋文帝的驸马，是山阴公主的姑父，刘子业命褚渊到内宫西头小楼上住宿十天，也就是提供方便让刘楚玉享受十天。刘楚玉每夜去逼迫，褚渊整衣肃立，毫不动容，做姑父的怎么能和内侄女乱来？刘楚玉骂道：''你须髯如戟，怎么没有一点男子意？''褚渊答道：''本官虽不敏却不能做出违反常理的事。''刘楚玉没法，只得让他回家。
刘子业的姑姑，新蔡公主刘英媚，是卫将军何迈的妻子，长得漂亮极了。景和元年（465年）十月，刘子业垂涎姑姑的美貌已久，宣其姑刘英媚入宫见面，随即逼迫与她发生了关系，并让她离开丈夫何迈。刘子业把刘英媚留在后宫，称她为谢贵嫔。而对外谎称刘英媚已经去世。刘子业又杀了一名宫女冒充刘英媚，送到何迈府中，用公主的礼仪殡殓埋葬。
