十三阿哥胤祥在一废太子之前是除太子之外康熙最宠爱的儿子，从13岁起只要康熙出巡必定带着胤祥，他也是唯一一个跟着康熙南巡达四次之多的皇子。传说为了受宠，他曾伏地去嗅康熙走过的路，最后他却也是黯然消逝。
历史上有“侠王”之称的十三阿哥胤祥怎么就和以阴谋诡计著称的四阿哥胤禛结成死党了呢？康熙皇帝知人善用，十三阿哥胤祥文才武略，可究竟又是为什么康熙皇帝偏偏不给十三阿哥胤祥一个光明的政治前途，甚至还直接致使他落下了一身残疾呢？胤祥出生在一个人口众多的特殊家庭。他的父亲康熙帝玄烨，因早婚、早育、多后妃，生养了众多子女。
在清朝皇帝中，玄烨的后妃人数是最多的，与玄烨同葬景陵的一共55位，其中皇后4人，皇贵妃3人，贵妃1人，妃11人，嫔8人，贵人10人，常在9人，答应9人。需要说明的是，玄烨生前册封的后妃，只有皇后3人，贵妃2人，妃11人，嫔5人，贵人11人，常在14人，答应9人。他死后，因雍正、乾隆二朝对其妃嫔又有追封，才出现后妃品级不同的现象。
这就是说，胤祥的生母、嫡母、庶母加在一起有55位以上。一个皇子有这么多的母亲，不仅在清朝，即便是在中国历史上大概也是屈指可数了。何况，他的兄弟姐妹也多得惊人。玄烨12岁（周岁11岁）大婚，两年后（1667）即14岁第一个孩子出生，至65岁最后一个孩子出生，玄烨前后一共生有55个子女。胤祥曾有过54个兄弟姐妹，这又是一个奇迹。
在康熙帝的众多后妃中，胤祥的生母章佳氏并不据有显赫的位置。她出身一般，是满洲镶黄旗参领海宽的女儿。初入宫，册封妃。她于康熙二十五年生皇十三子胤祥，二十六年生皇十三女，三十年生皇十五女。在四年零两个月内，连续生了三个孩子。
这在玄烨中年以后的嫔妃中再无二例，说明她一度很受皇帝的宠幸。但是，她享寿不长，康熙三十八年（1699）去世。这时，她的儿女尚幼，胤祥14岁，皇十三女13岁，十五女9岁。估计章佳氏本人死时也还年轻。章佳氏死后，玄烨降谕礼部：“妃张雅氏（章佳氏）性行温良，克娴内则，久侍宫闱，敬慎素著。今以疾逝，深为轸（ｚｈěｎ）悼，其谥为敏妃。”
幼年丧母，胤祥和两个妹妹只好由其他嫔妃代为抚养。据说，抚养胤祥的是德妃乌雅氏，即后来继承皇位的雍正帝胤禛的母亲。这种阴错阳差的安排，早早就把他与胤禛的命运联系在一起。
