历史上，安禄山的身世虽然留有很多疑问，但他的出身还是清楚的。《旧唐书》说他是“营州柳城杂种胡人也。本无姓氏，名轧荦山。母阿史德氏，亦突厥巫师，以卜为业。突厥呼斗战为轧荦山，遂以名之。少孤，随母在突厥中”。
因为她后来嫁给胡将军安延偃，才给本无姓氏的孤儿取名为安禄山。安延偃在开元初归顺唐朝，安禄山也一同居住在营州一带。开元年间，唐朝地方官在营州“招辑商胡，为立店肆”，这种招商引资的办法吸引了大量善于经营的胡商。
营州的经济总量增长很快，几年时间，这里“仓廪颇实，居人渐殷”(《旧唐书·良吏传下·宋庆礼传》)。渐渐长大的安禄山“为人奸贼残忍，多智计、善揣人情，通九番语”，遂在范阳(今北京)做了互市牙郎(经纪人)。在几年商场经营中，一次死里逃生的经历成为他人生道路上的第一次转折。
安禄山30岁的时候，他在生意场上“盗羊事发”，范阳节度使张守将他追捕归案，本欲将他“棒杀”。生死系于一线，张守竟然“奇其言貌”，将他释放。那么，安禄山相貌如何?又出何等言语?为什么会使张守改变主意?史书上一说是见其“肥白”，一说是“伟而皙”。
看来，正值壮年的安禄山之相貌不仅身材高大、皮肤皙白，而且体态丰肥。既然说张守“奇其貌”，大概在他眼中(或者按照唐人的审美观点)安禄山是个不同寻常的胡人。然而又为何“壮其言而释之”?安禄山之言是：“大夫(张守时兼加御史大夫的宪衔，此乃是尊称)不欲灭奚、契丹两番也?而杀壮士。”安禄山此言又何以能够打动节度使张守呢?
