وسمع بنيسابور: القاضي أبا بكر الحيري وأبا سعيد الصيرفي وأبا القاسم عبد الرحمن السراج وعلي بن محمد الطرازي والحافظ أبا حازم العبدوي وخلقا.
وبأصبهان: أبا الحسن بن عبد كويه وأبا عبد الله الجمال ومحمد ابن عبد الله بن شهريار وأبا نعيم الحافظ.
وبالدينور: أبا نصر الكسار.
وبهمذان: محمد بن عيسى وطبقته.
وسمع: بالري والكوفة وصور ودمشق ومكة.
وكان قدومه إلى دمشق في سنة خمس وأربعين، فسمع من محمد بن عبد الرحمن بن أبي نصر التميمي وطبقته. واستوطنها ومنها حج وقرأ صحيح البخاري على كريمة في أيام الموسم.
وأعلى ما عنده حديث مالك، وحماد بن زيد بينه وبين كل منهما ثلاثة أنفس.
حدث عنه: أبو بكر البرقاني؛ وهو من شيوخه وأبو نصر بن ماكولا والفقيه نصر والحميدي وأبو الفضل بن خيرون والمبارك بن الطيوري وأبو بكر بن الخاضبة وأبي النرسي وعبد الله بن أحمد بن السمرقندي والمرتضى محمد بن محمد الحسيني ومحمد بن مرزوق الزعفراني وأبو القاسم النسيب وهبة الله بن الأكفاني ومحمد بن علي بن أبي العلاء المصيصي وغيث بن علي الأرمنازي وأحمد بن أحمد المتوكلي وأحمد ابن علي بن المجلي وهبة الله بن عبد الله الشروطي وأبو الحسن بن سعيد وطاهر بن سهل الإسفراييني وبركات النجاد وعبد الكريم بن حمزة وأبو الحسن علي بن أحمد بن قبيس المالكي وأبو الفتح نصر الله بن محمد المصيصي وقاضي المارستان أبو بكر وأبو القاسم إسماعيل بن أحمد بن السمرقندي وأبو بكر محمد بن الحسين المزرفي وأبو منصور الشيباني؛ راوي تاريخه وأبو منصور بن خيرون المقرئ وبدر بن عبد الله الشيحي والزاهد يوسف بن أيوب الهمذاني وهبة الله بن علي المجلي وأخوه أبو السعود أحمد وأبو الحسين بن أبي يعلى وأبو الحسين بن بويه وأبو البدر الكرخي ومفلح الدومي ويحيى بن الطرح وأبو الفضل الأرموي وعدد يطول ذكرهم.
وكان من كبار الشافعية، تفقه على أبي الحسن بن المحاملي، والقاضي أبي الطيب الطبري.
قال أبو منصور بن خيرون: حدثنا، الخطيب أنه ولد في جمادى الآخرة سنة 392 وأول ما سمع: في المحرم سنة ثلاث وأربع مائة.
قال أحمد بن صالح الجيلي: تفقه الخطيب وقرأ بالقراءات وارتحل وقرب من رئيس الرؤساء فلما قبض عليه البساسيري استتر الخطيب وخرج إلى صور وبها عز الدولة؛ أحد الأجواد فأعطاه مالا كثيرا. عمل نيفا وخمسين مصنفا وانتهى إليه الحفظ شيعه خلق عظيم وتصدق بمائةي دينار وأوقف كتبه واحترق كثير منها بعده بخمسين سنة.
وقال الخطيب: استشرت البرقاني في الرحلة إلى أبي محمد بن النحاس بمصر أو إلى نيسابور إلى أصحاب الأصم فقال: إنك إن خرجت إلى مصر إنما تخرج إلى واحد إن فاتك ضاعت رحلتك وإن خرجت إلى نيسابور ففيها جماعة إن فاتك واحد أدركت من بقي. فخرجت إلى نيسابور.
قال الخطيب في تاريخه: كنت أذاكر أبا بكر البرقاني بالأحاديث فيكتبها عني ويضمنها جموعه. وحدث عني وأنا أسمع: وفي غيبتي ولقد حدثني عيسى بن أحمد الهمذاني أخبرنا، أبو بكر الخوارزمي سنة عشرين وأربع مائة حدثنا، أحمد بن علي بن ثابت حدثنا، محمد بن موسى الصيرفي حدثنا، الأصم. فذكر حديثا.
قال ابن ماكولا: كان أبو بكر آخر الأعيان ممن شاهدناه معرفة وحفظا وإتقانا وضبطا لحديث رسول الله -صلى الله عليه وسلم- وتفننا في علله وأسانيده وعلما بصحيحه وغريبه وفرده ومنكره ومطروحه ولم يكن للبغداديين بعد أبي الحسن الدارقطني مثله. سألت أبا عبد الله الصوري عن، الخطيب وأبي نصر السجزي: أيهما أحفظ؟ ففضل الخطيب تفضيلا بينا.