唐定州义丰（今河北安国）人。晓音乐，由弟昌宗引荐入侍武则天，历官控鹤监、奉宸令、麟台监，封恒国公。则天末年，与弟昌宗等专朝政。神龙元年（公元705年）张柬之等迎中宗复位时被杀。