赵高的母亲是个刑满释放人员，因为身体有残疾，被收入到了隐宫，按照当时的法律来说，这类人的地位甚至还在普通庶民之下，后来被一个在此工作的下层文法官吏相中，二人结为夫妻，生下了赵高兄弟几个。赵高出生的这一年是公元前256年，很巧的是远在东边的丰邑也有一个男孩出生，后来名字唤作刘邦，还曾经跟赵高有过一个密谋。当然，赵高出生时，他家的生活水平肯定是不高的，不过，幸运的是，他的父亲虽然职位不高，但却有两样才能--律法和写字，这也是后来赵高得以飞黄腾达的基础。
有父亲的严格要求，赵高本人又非常聪明好学，他很早就打下了秦律的基础，更是写得一手好字，这自然也是赵父非常欣慰的地方。凭借着过人的本领，二十岁的赵高便通过秦朝的官吏选拔考试，跟他父亲当初一样，成为了一名文法官吏，后来更是因为表现优异，当上了秦始皇身边的尚书卒吏，负责处理一些文秘工作。很显然，秦始皇身边并不是只有赵高一个人做这份工作，但是赵高却依旧能够凭借自己的本领在这些人当中脱颖而出，仅仅数年时间便当上了中车府令。
在历史上，赵高是一个著名的小人。不过，不应该简单看待一个历史人物，赵高能登上权力的巅峰，自然有其道理。根据史料所载，赵高本是赵国王室的远房亲属，不过到他父亲这一辈时，家道中衰，母亲也被判了罪受了刑，沦为卑贱阶层。尽管出身卑微，赵高却有一种不服输的精神，硬是以自己的努力闯出一片天地。
