للقتال المستميث، فقابلهم المسلمون بالسهام كالمطر، وقاتل الطرفان قتالا شديدا حتى هزم الله الكفار، ورجعوا إلى داخل الحصن.

وفيما بعد هيأ ابن القاسم جنده للهجوم العام، فنصب السلالم، فكان أول المتسلقين صعدى بن خزيمة المرادي الكوفي، وتلاه عجل بن عبد الملك ابن قيس البصري،وفتحت الأبواب، فكبر المسلمون ودخلوا. لكن المشركين قاتلوا قتال الموت أو حياة أشد من ذي قبل.

واستمر القتال داخل الحصن ثلاثة أيام، حتى كانت الغلبة لجند الله، وتوجه بعض جند المسلمين إلى المعبد، وقتلوا حراسه، واخرجوا منه 700 جارية موقوفة