Yang masih segar dalam ingatan kolektif masyarakat, ketika terjadi letusan dahsyat Gunung Agung pada 1963, yang mengeluarkan lahar panas, menyemburkan jutaan batu besar dan kecil serta abu yang menjulang tinggi di angkasa, menyebar ke seluruh Pulau Bali, bahkan sampai ke wilayah Jawa Timur, makam kuno itu bergeming, tak tersentuh apa pun. Padahal, banyak desa luluk lantak, porak poranda. Pohon-pohon besar bertumbangan. Bangunan dan gedung-gedung yang kokoh hancur tertimbun batu dan pasir.
Bagaimana dengan makam kuno itu, yang letaknya jauh dari Gunung Agung? Seperti dlindungi keajaiban atau mukjizat, tak sebutir pun batu kerikil dan pasir menyentuh, atau jatuh, di atas makam kuno itu. I tetap kukuh dan anggun, jauh dari reruntukan. Itulah bukti yang memperkuat kekeramatan makam kuno ini.
Jika jejak sejarah Syekh Maulana Yusuf al-Baghdi al-Maghribi sangat minim, berbeda dengan juru kunci makam pertamanya, Habib Ali Zainal Abidin al-Idrus. Habib Ali Zainal Abidin al-Idrus dikenal sebagai ulama besar yang arif dan bijaksana. Bermukim di Karangasem, ia mengajar kepada banyak santri yang datang tak hanya daerah Bali, tapi juga dari Lombok, Nusa Tenggara Barat.