胡汉民虽然是孙中山的重要助手，但他对孙中山的儿子很不客气，孙科当广州市长期间，手伸的太长，惹恼了胡汉民，跟孙科吵得脸红脖子粗，甩手要辞职。还是孙中山出面，把孙科训斥一顿，胡汉民才安静下来。
有人说：你脾气太大了，惹孙科干什么？胡汉民眼一瞪，说：孙科是中山先生之子，有革命脾气；又在国外生活，有外国人的脾气；又是中山先生的独子，还有大少爷脾气。可是，我老胡只有追随中山先生的革命脾气！
话说的好听，孙中山的话，胡汉民照样敢顶。孙中山有些文件，胡汉民觉得不合适，就给扣留了下来。孙中山脾气也不好，厉声指责胡汉民：你怎么有胆扣我的文件！
胡汉民没有争辩，拉出一只大箱子，拿出一大撂文件，说：并不只是扣了这一次，您数一数，总共扣了多少次？孙中山差点没气死。
胡汉民说：“慎施命令”四个字，是您说的吧？如果是错误的命令，对外颁布后，不是损伤您的名声吗？所以，该扣，我就得扣！
孙中山虽然生气，但人家胡汉民确实说的有道理，只好跟他赔礼道歉，说以后你觉得该扣就扣。
胡汉民地位太高，引起了新贵蒋介石和汪精卫的忌恨。1925年，元老廖仲恺被刺杀，因为凶手胡毅生和胡汉民私交不浅，蒋介石和汪精卫就借着这个理由，派人去胡汉民家搜拿有关胡毅生的“赃”。胡汉民见势不妙，跳墙跑了出去。
