当时，武则天的父母带着家眷举家搬迁到蜀中来生活，武则天的母亲无意间遇到了这位相术高手，他看见武母的第一眼就知道她生下的小孩非富即贵，于是袁天罡就给她的两个儿子都看了相，而当时的武则天还是一个婴儿，武母就对袁天罡说谎武则天是一个男孩，袁天罡并没有细看婴儿的性别只是对武母说：如果你的这个孩子是个女孩的话，命中就注定能当上天子。袁天罡当时的言论没有得到太多的关注，毕竟从没有女子当皇帝的先例。
后来，袁天罡的才识被李世民的得知，特意将他召入宫中，让他给大臣们看相，他准确地预测了房玄龄将来会位居高位，房玄龄后来真的位极人臣。唐太宗驾崩后，袁天罡预感到留在皇帝身边恐怕会凶多吉少，他向皇帝请求辞官回乡，自己的时日不多了。果然在当年的四月袁天罡就与世长辞。
