وقال النووي:"وهذا الحديث لا حجة فيه لأحد منهم، بل فيه إثبات فضيلة لعلي ولا تعرض فيه لكونه أفضل من غيره أو مثله، وليس فيه دلالة لاستخلافه بعده؛ لأن النبي صلى الله عليه وسلم إنما قال هذا لعلي حين استخلفه في المدينة في غزوة تبوك, ويؤيد هذا أن هارون المشبه به لم يكن خليفة بعد موسى، بل توفي في حياة موسى، وقبل وفاة موسى بنحو أربعين سنة على ما هو مشهور عند أهل الأخبار والقصص، قالوا: وإنما استخلفه حين ذهب لميقات ربه للمناجاة" (6) .
وقال ابن حزم بعد أن ذكر احتجاج الرافضة بالحديث:"وهذا لا يوجب له فضلًا على من سواه، ولا استحقاق الإمامة بعده؛ لأن هارون لم يل أمر بني إسرائيل بعد موسى عليهما السلام، وإنما ولي الأمر بعد موسى يوشع بن نون فتى موسى وصاحبه الذي سافر معه في طلب الخضر عليهما السلام، كما ولي الأمر بعد رسول الله صلى الله عليه وسلم صاحبه في الغار الذي سافر معه إلى المدينة، وإذا لم يكن علي نبيًا كما كان هارون نبيًا، ولا كان هارون خليفة بعد موت موسى على بني إسرائيل فصح أن كونه من رسول الله صلى الله عليه وسلم بمنزلة هارون من موسى إنما هو في القرابة فقط، وأيضًا فإنما قال له رسول الله صلى الله عليه وسلم هذا القول إذ استخلفه على المدينة في غزوة تبوك.. ثم قد استخلف قبل تبوك وبعد تبوك في أسفاره رجالًا سوى علي، فصح أن هذا الاستخلاف لا يوجب لعلي فضلًا على غيره، ولا ولاية الأمر بعده، كما لم يوجب ذلك لغيره من المستخلفين" (7) .