ونظرية"ابن الكلبي"ومن لف لفه من الأخباريين أن نسل إسماعيل بن إبراهيم لما تكاثر بمكة حتى ضاقت بهم. وقعت بينهم الحروب والعداوات، فأخرج بعضهم بعضًا، فتفسحوا في البلاد التماسًا للمعاش وكان كلما ظعن من مكة ظاعن حمل معه حجرًا من حجارة الحرم؛ تعظيمًا للحرم وصبابة بمكة.