胡亥继位后，便在赵高的蛊惑下对自己的兄弟姐妹毫不留情。
据《史记》记载，他先是害怕大臣不服从、兄弟姐妹与之夺权而"行诛大臣及诸公子，以罪过连逮少近官三郎，无得立者，而六公子戮死於杜。"不久后，胡亥嫌不够，便又在赵高的劝说下"杀大臣蒙毅等，公子十二人僇死咸阳市，十公主矺死于杜，财物入于县官，相连坐者不可胜数。"
这些公子、公主被杀后，胡亥还剩下四个兄弟，其中三个一直坚持自己没有任何不当的行为。胡亥一时间没法找借口将其杀死。无计可施下，胡亥破罐子破摔，直接派人去将他们赐死，史载："将闾乃仰天大呼天者三，曰：'天乎！吾无罪！'昆弟三人皆流涕拔剑自杀。"
最后，胡亥仅剩的兄弟公子高见难逃一死，便主动提出前往骊山为始皇帝殉葬，胡亥十分高兴，赐他十万钱，其家人也得以安然无恙。
