وكان حاجب هارون الرشيد، ومُحَمد الأمين، وَكان أبوه حاجب المنصور والمهدي ولما أفضت الخلافة إلى الأمين قدم الفضل عليه من خراسان، وَكان في صحبة الرشيد إلى أن مات بطوس فأكرم الأمين الفضل وألقى أزمة الأمور إليه وعول في مهماته عليه.
وقد اسند الحديث عن المنصور والمهدي أميري المؤمنين.