وأما لطفه مع الصبيان ومع أهل بيته واهتمامه بهم فكان كبيراً، قال الخلال: قلت ل زهير بن صالح: هل رأيت جدك؟ قال: نعم، مات وأنا في عشر سنين، كنا ندخل إليه كل يوم جمعة أنا وأخواتي وكان بيننا وبينه باب، وكان يكتب لكل واحد منا حبتين حبتين من فضة في رقعة إلى فامي يعامله.
كان هناك بائع ثوم، كان الإمام أحمد يتعامل معه، وكان أحمد ربما رهن عنده أشياء حتى يأخذ منه أموالاً يعطيها للصبيان فيفرحوا بها، ثم إذا فتح الله عليه بشيء رد المال إلى بائع الثوم.