येथे मराठा काळात सिंधिया यांनी युद्धात विजय मिळविण्यासाठी देवाला आपली पगडी अर्पण केली होती. पानिपत येथील युद्धात मराठ्यांचा पराभव झाल्यावर महादजी सिंधिया यांनी राज्याची पुनर्स्थापनेसाठी देवासमोर पगडी ठेवून नवस म्हणाला की युद्धात विजय मिळाल्यावर मंदिराचे जीर्णोद्धार करण्यात येईल. काल भैरवाच्या कृपेने सिंधिया यांना विजय प्राप्त झाली आणि मंदिराचे जीर्णोद्धार झाले. तेव्हापासून मराठांची पगडी काल भैरवच्या मस्तकावर सज्ज करण्यात येते.