年幼时的虞允文非常聪慧，擅诗文，后来因为父亲当官的缘故，受到举荐，在地方上做了一个小官。几年后，他的母亲去世，为了守孝，同时他也不忍心父亲一个人孤苦伶仃的生活，因此一直没有参加科举。
公元1153年，为父亲守孝期满后，此时已经44岁的虞允文才参加科举，中了进士，此后一直做着彭州通判、渠州知州等地方官职，并且颇有政绩。
奸臣秦桧为相期间，一向排挤和压制各方有识之士，尤其以四川有气节、不肯与其同流合污的读书人最为典型，公元1155年，秦桧去世以后，许多有识之士终于像看到黑暗黎明前的第一缕曙光一样，迎来了仕途上的春天。
在同乡、中书舍人赵逵的推荐下，虞允文得到了宋高宗的召见，作为第一批被推荐上来的蜀中名士，宋高宗对他也格外的重视，他让虞允文对为君之道及吏治发表下自己的观点，其实也带有考考他的含义。
在地方上历练多年，为政经验比较丰富的虞允文答道："作为一国之君，首先必须敬畏上天，其次要安抚百姓，同时能效法祖先的各种法令制度。至于当下的吏治，凭文章被提拔的官员一定要抑制其轻浮举止；凭言谈被提拔的官员一定要去除其投机、欺瞒的劣行；凭治政被提拔的官员一定要屏弃其苛刻的行为，这样才可以放心地对他们委以重任。"
