كان للحارث الثقفي جارية تسمى سمية، وعبد رومي يسمى عُبيداً، فزوَّج عبيداً بسمية، فأنجبت له غلاماً فسمَّاه زياداً، وظهرت عليه مخائل النجابة وهو صغير، فتعلم في كُتاب في الطائف فأعجب به المعلم، وجعله موضع ثقته، فقال وسنه في الثالثة عشرة: "حين أعلم أصغر مني فإني أتعلم لأني بذلك أذكر ما نسيت وأتدبر ما حفظت".