واختصم مرة بمدينة طرابلس قوم من المسلمين مع قوم من النصارى على حجر، فزعم المسلمون أنه كان بمسجد (قد) انهدم وأن النصارى قد أدخلوه في ركن من أركان كنيستهم عمادا له، وزعم النصارى أن الحجر لهم قديما، وأن المسلمين ادعوا عليهم فيه. قال: فقال أبو العباس: اذهبوا بنا إلى موضع الحجر، (قال): فساروا حتى حاذوا المكان، فوقف أبو العباس (ووقف الناس معه - رضي الله عنه -)، فقال: أيها الحجر، إن كنت كما قال المسلمون، فقع بإذن الله تعالى وقدرته، وإن كنت كما قال النصارى فاثبت في مكانك، قال: فمال الحجر حتى سقط بالأرض وانهدم ركن الكنيسة الذي كان معتمدا عليه. قال: فقال للمسلمين: ارفعوا حجركم.

وقال للنصارى: ابنوا أنتم كنيستكم.