Namun seiring dengan berjalannya waktu, lokasi sekitar makam telah ramai oleh hunian penduduk. Warga setempat bahkan membangun nisan pada makam tersebut di tahun 1960-an setelah mendapatkan pertanda untuk merawatnya melalui mimpi.
Sebelum ramai penduduk seperti saat ini, jalanan sekitar makam memiliki banyak cerita seram. Warga sekitar bahkan menyebut ada ‘demit nggonceng’ pada makam.
Demit nggonceng sendiri merupakan hantu yang dipercaya akan menunggangi kendaraan pengendara sepeda, sepeda motor, atau mobil yang melewati jalanan tersebut sendirian. Hantu yang dimaksud berupa kuntilanak, anak kecil dengan sosok yang menyeramkan, atau bahkan sosok raksasa dengan mata melotot dan bau anyir yang menyengat.
Kejadian menyeramkan juga terjadi ketika warga ingin memindahkan makam tersebut, seperti adanya kesurupan massal, koloni serangga yang menyerbu rumah warga, hingga penampakan seram yang meneror warga. Maka dari itu, makam tersebut tidak pernah dipindahkan hingga saat ini.
Meskipun kini sudah jarang terdengar kisah-kisah seram seperti itu, makam ini masih begitu dikeramatkan oleh warga sekitar. Makam 3 bayi bahkan kerap dikunjungi oleh peziarah dari luar Solo.