بل عمدتها ما تزعم روايته عن بعض أهل البيت وليس كل أهل البيت، فقد رد الطوسي روايات زيد بن علي بن الحسين [انظر: الاستبصار: 1/66.] .. وكفر هؤلاء جملة من أهل البيت لا لشيء إلا لأنهم لم يصدقوا بدعوى إمامة الاثني عشر [انظر: أصول الكافي: 1/372، بحار الأنوار: 25/112-114.] . ويا ليتهم أخذوا بما يقوله أمير المؤمنين علي، أو قنعوا بمراسيل التابعين كعلي بن الحسين؛ بل يأتون إلى من تأخر زمانه كالعكسريين فيقولون: كل ما قاله واحد من أولئك فالنبي قد قاله.

وكل من له عقل يعلم أن العسكريين بمنزلة أمثالهما ممن كان في زمانهما من الهاشميين ليس عندهم من العلم ما يمتازون به عن غيرهم، ويحتاج إليهم في أهل العلم، ولا كان أهل العلم يأخذون عنهم، كما يأخذون عن علماء زمانهم، وكما كان أهل العلم في زمن علي بن الحسين وابنه أبي جعفر وابن ابنه جعفر بن محمد، فأن هؤلاء الثلاثة - رضي الله عنهم - قد أخذ أهل العلم عنهم كما كانوا يأخذون عن أمثالهم بخلاف العسكريين ونحوهما فإنه لم يأخذ أهل العلم المعروفون بالعلم عنهم شيئًا. فيريدون أن يجعلوا ما قاله الواحد من هؤلاء هو قول الرسول الذي بعثه الله إلى جميع العالمين، بمنزلة القرآن والمتواتر من السنن، وهذا مما لا يبنى عليه دينه إلا من كان أبعد الناس من طريقة أهل العلم والإيمان [منهاج السنة: 3/40-41.] .

وقد تحدث ابن حزم عن هذه الدعوى للروافض وقال:"وأما من بعد جعفر بن محمد فما عرفنا لهم علمًا أصلًا، لا من رواية ولا من فتيا على قرب عهدهم منا، ولو كان عندهم من ذلك شيء لعرف كما عرف عن محمد بن علي وابنه جعفر وعن غيره منهم ممن حدث الناس عنه" [الفصل: 4/175.] . وأما من قبل جعفر فلهم ما لنظرائهم من العلم والفضل.