هو أحد أوعية العلم عامة، وعلم عمته عائشة خاصة، وأحد الفقهاء السبعة القاسم بن محمد بن أبي بكر الصديق.
سمع عمته عائشة وابن عباس ومعاوية وفاطمة بنت قيس وابن عمر وطائفة، وروى عنه ابنه عبد الرحمن والزهري وابن المنكدر وابن عون وربيعة الرأي وأفلح بن حميد وحنظلة بن أبي سفيان وأيوب السختياني وخلق.
وقد قتل محمد بن أبي بكر والقاسم صغير فتربى في حجر عمته عائشة وتفقه بها