وذهب إمامنا أحمد بن حنبل والشافعي في أحد قوليه وإسحاق بن راهويه وعبدا الله بن المبارك والنخعي والحكم وأيوب السختياني وأبو داود الطيالسي وغيرهم من كبار الأئمة والتابعين إلى أنه كافر، وحكاه إسحاق بن راهويه إجماعاً ذكره عنه الشيخ أحمد بن حجر الهيتمي في شرح الأربعين. وذكره في كتاب الزواجر عن اقتراف الكبائر عن جمهور الصحابة -رضي الله عنهم-.
وقال الإمام أبو محمد بن حزم: سائر الصحابة -رضي الله عنهم- ومن بعدهم من التابعين يكفرون تارك الصلاة مطلقاً ويحكمون عليه بالإرتداد، منهم أبو بكر وعمر وابنه عبد الله وعبد الله بن مسعود وعبد الله بن عباس ومعاذ بن جبل وجابر بن عبد الله "وأبو الدرداء" وأبو هريرة" (?) وعبد الرحمن بن عوف "وغيرهم من الصحابة ولا نعلم لهؤلاء