وأوضحت المصادر أن بداية طلبه الحديث كان في سنة 793 ه وغير أنه لم يكثر إلا في سنة 796ه وكتب بخطه: "
()
رفع الحجاب، وفتح الباب، وأقبل العزم المصمم على التحصيل، ووفق للهداية إلى سواء السبيل" فكان أن تتلمذ على خيرة علماء عصره.
وكان شيخه في الحديث زين الدين العراقي الذي لازمه عشر سنوات، وحمل عنه جملة نافعة من علم الحديث سندا ومتنا وعللا واصطلاحا، فقرأ عليه ألفيته وشرحها فنون الحديث وانتهى منهما في رمضان سنة 798ه بمنزل شيخه المذكور بجزيرة الفيل على شاطىء النيل، كما قرأ عليه نكته على ابن الصلاح في مجالس آخرها سنة 799ه، وبعض الكتب الكبار والأجزاء القصار، وحمل جملة مستكثرة من "أماليه" واستملى عليه بعضها وهو أول من أذن له بالتدريس في علوم الحديث عام 797ه.
وقرأ على مسندي القاهرة ومصر الكثير في مدة قصيرة فوقع له سماع متصل عال لبعض الأحاديث.
أسرته:
كانت أسرة الحافظ ابن حجر تجمع بين الاشتغال بالتجارة والاهتمام بالعلم، فكان عم والده فخر الدين عثمان بن محمد بن علي الذي عرف بابن البزاز وب "ابن حجر" قد سكن ثغر الإسكندرية وانتهت إليه رئاسة الإفتاء هناك على مذهب الإمام الشافعي وتفقه به جماعة منهم الدمنهوري، وابن الكويك، وكان له ولدان هما ناصر الدين أحمد، وزين الدين محمد، وكانا من الفقهاء.
أما جده قطب الدين محمد بن محمد بن علي فلقد كان بارعا رئيسا تاجرا، حصل على إجازات من العلماء، وأنجب أولادا منهم كمال الدين، ومجد الدين، وتقي الدين وأصغرهم
ولي الدين ثم نور الدين علي، وهو والد ابن حجر الذي انصرف من بينهم لطلب العلم أما إخوته فكانوا تجارا.
ويبدو من خلال سيرة نور الدين على أنه مع اشتغاله بالتجارة عكف على الدرس وتحصيل العلوم فتفقه على مذهب الإمام الشافعي وحفظ الحاوي الصغير، وأخذ الفقه عن محمد بن عقيل وأجازه، وسمع من أبي الفتح بن سيد الناس وطبقته وله استدراك على الأذكار للنووي فيه مباحث حسنة، وعدة دواوين شعر منها ديوان الحرم فيها مدائح نبوية، وكان معنيا بالنظم ذا حظ جيد في الأدب.
وقال ابن حجر عن أبيه: "لم يكن له بالحديث إلمام ونظمه كثير سائر" ووصفته المصادر بالعقل والديانة والأمانة ومكارم الأخلاق، وصحبة الصالحين، ونوهت بثناء ابن القطان وابن عقيل والولي العراقي عليه، وناب في القضاء، وأكثر من الحج والمجاورة وصنف، وأجيز بالإفتاء والتدريس والقراءات السبع وتطارح مع ابن نباتة المصري والقيراطي، وتبادل معهما المدائح.
كان مولده في حدود سنة 820 ه في رجب سنة 777 ه.
أما والدته فهي تجار ابنة الفخر أبى بكر بن شمس محمد بن إبراهيم الزفتاوي، أخت صلاح الدين أحمد الزفتاوي الكارمي صاحب القاعة الكائنة بمصر تجاه المقياس.
وكانت له أخت، ترجم لها في "إنباء الغمر" و"المجمع المؤسس" وهي ست الركب بنت علي بن محمد بن محمد بن حجر، وكانت قارئة كاتبة أعجوبة في الذكاء، أثنى عليها وقال: "كانت أمي بعد أمي، أصبت بها في جمادى الآخرة من هذه السنة" أي سنة 798ه.
وذكر السخاوي تحصيلها الثقافي وإجازتها، وزواجها، وأولادها كما ذكر الحافظ ابن حجر شيوخها وإجازتها من مكة ودمشق وبعلبك ومصر وقال: "وتعلمت الخط وحفظت الكثير من القرآن، وأكثرت من مطالعة الكتب فمهرت في ذلك جدا ... وكانت بي برة رفيقة محسنة، وقد رثاها أخوها الحافظ ابن حجر في قصيدة، وكان له أخ من أمه اسمه عبد الرحمن بن الشهاب أحمد بن محمد البكري، ترجم له في إنبائه وقال: إنه مهر وحصل مالا أصله من قبل أمه- وهي والدتي- فقدر الله موته فورثه أبوه.