Ketika Imam Bukhari masih kecil ayahnya meninggal, sehingga ibunya merawat dan mendidiknya seorang diri. Biaya pendidikannya itu didapat dari harta peninggalan ayahnya. Ismail; ayah dari Imam Bukhari ini tampaknya memang dari awal suka dan cenderung kepada Hadits Nabawi.
Ketika pergi haji pada tahun 179 H, atau 15 tahun sebelum Bukhari lahir, beliau menyempatkan diri menemui tokoh-tokoh ahli hadis seperti Imam Malik bin Anas (w. 179 H), Abdullah bin al-Mubarak (w. 181 H), Abu Mu’awiyah bin Shalih, dan lain-lain.
Tidak berselang lama Ismail wafat ketika Imam Bukhari masih kecil. Sebuah perpustakaan pribadi ditinggalkannya untuk Imam Bukhari di samping semangat untuk mengaji hadis.
Dalam keadaan yatim, Imam Bukhari lalu diasuh oleh ibundanya dengan kasih sayang. Dibimbingnya untuk menyintai buku-buku peninggalan ayahnya. Bersama-sama kawan sebayanya Imam Bukhari belajar membaca, menulis, Al-Quran dan Hadits.
Imam Bukhari ketika kecil mengalami rasa sakit yang teramat di kedua matanya, hingga akhirnya mengalami kebutaan. Keadaan tersebut terus dialami Imam Bukhari hingga suatu ketika Allah mengembalikan penglihatannya berkat usaha dan doa yang dipanjatkan oleh ibunya.