唐肃宗李亨是唐玄宗李隆基和元献皇后杨氏所生，唐睿宗景云二年（711年）乙亥出生，是李隆基的第三个儿子。李隆基是唐朝第八位皇帝，也是第一个在京师以外登基再进入长安的皇帝，至德元载（756年）至宝应元年（762年）在位。
元献皇后杨氏出生于弘农杨氏，是关陇地区的名门望族。弘农杨氏始祖为汉昭帝时期的丞相、司马迁的女婿杨敞。杨敞玄孙杨震官居东汉太尉，号称“关西孔子”，其子杨秉、孙杨赐、重孙杨彪皆为太尉，时称“四世太尉”、“东京名族”。
元献皇后杨氏的曾祖父杨士达在隋代任宰相，武帝武则天的生母就是杨士达的女儿。