قيل: بنو الأصفر هم الروم، يقول ابن الأنباري: سموا ببني الأصفر؛ لأن جيشاً من الحبشة غلب على بلادهم -أي: على الروم، وهؤلاء الروم بيض- فوقع رجال الحبشة على نساء الروم فأتى الولد بين السواد والبياض أي: أصفر، فلُقّبوا بعد ذلك ببني الأصفر.
أما أبو إسحاق بن إبراهيم الحربي فقال: كلام ابن الأنباري هذا مردود ومرفوض، وإنما هم نسبوا إلى الأصفر بن الروم بن عيص بن إسحاق بن إبراهيم عليه السلام.