金日磾的长子叫弄儿，长大后行为不谨慎，在殿下与宫女戏闹，金日磾正好看见，厌恶他的淫乱，于是杀了弄儿。汉武帝得知后大怒，金日磾叩头告罪，把杀弄儿的原因说出。汉武帝很哀伤，对他更以礼相待。
金日磾的女儿长得貌美如花，汉武帝想将她纳入后宫。面对别人都梦寐以求的机会，金日磾却老泪纵横跪地拒绝，原来他怕女儿入宫，发展成外戚的力量，给自家招来祸害。金日磾这样笃厚谨慎，汉武帝更加信任他。
汉武帝病重，封金日磾为秺侯，让他和霍去病同为托孤重臣，金日磾后来对继任的昭帝也是忠心耿耿，其后人对汉朝世代忠心，家族因此“七世不衰”昌盛130年，子孙世代都继承爵位。西汉末年，金家逐渐没落，王莽时期短暂昌盛。刘秀建立东汉后，金家人一部分逃到了朝鲜，一部分逃到了南方。朝鲜姓金的，不少是他的后人，这从史料中找到了佐证，但他们并没有认祖归宗承认是金日磾的后代。
