袁天罡为隋朝雅士巴地津琨(江津)人,袁守懿次子。袁天纲年少时孤苦贫寒,但他爱读书,好学问,精通技艺,对相术深有研究 ,唐时应友人张柬之邀赴洛阳任资官令。 袁天纲初到洛阳时,在清化坊安顿下来,此时他以相术预测已是赫赫有名,许多人都来家里找。当时,杜淹、王珪、韦挺三个人来见袁天纲,请他给看相。袁天纲预言杜淹将以文章显贵而名扬天下;王珪不出十年将官至五品;韦挺面相如虎,将出任武官。并预言三人为官后都要遭贬谴,届时大家还会见面。果然在唐高祖武德年间,杜淹以侍御史入选天策学士;由太子李建成举荐王珪当上五品太子中允,韦挺出任武官左卫率 。三人正当仕途一帆风顺时,没想到受宫廷政变牵连一起被贬隽州,果然在这里又遇到了袁天纲。袁天纲再次相面预测"公等终且贵",最后都要官至三品,三人前程及结局后来验证都不出其所料。