فاستشرتموه في ذلك لم تعدموا من مشورته خيرا .. فقصدوا أبا يعقوب بقصد استشارته. وكان أبو يعقوب يسكن بغار، فإذا طلعت الشمس خرج من غاره وقعد فيها .. فجاؤوه وقد مد فيها رجليه واجتمع عليهما ذباب كثير، فلما دنا منه أعيان مراكش، قال لهم: قفوا هنالك ولا تدنوا مني فيطير هذا الذباب الذي شبع مني فيأتيني ذباب جائع. ففهموا إشارته وأنه يقول لهم: اتركوا هذا الأمير الذي عندكم فإنه قد شبع، وإن خلعتموه وأتيتم بآخر جاءكم جائعا فلا يشبع حتى يؤذيكم ..."ومهما يكن من شأن هذه الرواية صحة أو وضعا فإنها تمرر خطابا سياسيا لا يخلو من أهمية في إدراك بعض جوانب"الفكر السياسي"خلال العصر الموحدي وبعده .. وقد علق الإفراني على هذه الرواية تعليقا يبرز وجهة نظره"السياسية"بقوله:"ولا يخفى ما في إشارة أبي يعقوب رحمه الله من اللطائف وكأنه يقول لهم انتم قوم سوء وأعمالكم قبيحة، لا يأتيكم إلا من يسير فيكم سيرة هذا الأمير؛ لأنه ما جار عليكم حتى جرتم أنتم عن الطريق المستقيم".. (درر الحجال، ص 138، 139) ."

أما عن قصة بناء ضريح سيدي يوسف بن علي على شكله الحالي، فيروي محمد الصغير الإفراني في"درر الحجال":"وكان قبره في قعر الغار، ينزل الناس إليه بمدارج في مكان مظلم. ولم يكن عليه من البناء إلا القليل. فلما كان عام أربعة وثلاثين ومائة وألف جاء سيل جارف فدخل الغار والمسجد وهدم بيوت القرية المستندة على الغار، وضاع بسبب ذلك مال كثير، فاحتفل والي المدينة إذ ذاك في البناء على أبي يعقوب، فشيد القبة الموجودة الآن. واحتفر الغار كله إلى أن صار ضريح أبي"