胡林翼官越做越大，正是春风得意的时候，打击却接踵而至。先是1839年，岳父陶澍突然病逝，他失去了朝中的靠山，紧接着在担任江南乡试副考官时，出了岔子被降职。然后，他的父亲胡达源又去世了，按照朝制，他回乡守孝三年。
这一连串的打击并没有让他消沉下去，猛人就是猛人，如果说三年前的胡林翼只是个仕途畅达的官二代，那么，三年后再次杀回京城的他目标就是奔着"名列青史"而去的，他要成为匡扶天下的重臣。
胡林翼回到京城，只能先当个候补京官，实职早就被人填满了。与其等着别人空出京官的位置，不如先去地方锻炼，胡林翼想明白后，找故旧门生凑了些钱，捐了一个知府。
当时，花钱捐官的选择余地很大，常人都会选择较为富裕的地区，这些地方油水大，谁都不愿去穷沟沟。可是胡林翼偏偏选择了贵州，一个在当时偏僻、贫瘠、闭塞的地区。
