Храм является одним из самых популярных шактипеев (богослужебная святыня, где упали отрубленные части тела богини Сати). В храме, расположенном недалеко от реки Кшипра, находится идол Мата Харсиддхи, главного божества храма. Здесь также можно поклониться идолам богинь Аннапурны, Махалакшми и Махасарасвати. Главной достопримечательностью храма является Шри-Лантра, символ могущества, или Шакти, который здесь установлен. Архитектура храма содержит некоторые элементы влияния Маратхи. В нем четыре входа, по одному в каждом направлении; главный вход находится с восточной стороны. На территории храма расположены две башенные колонны в форме булавок. Во время фестиваля Навратри (священный девятидневный праздник), 726 светильников, установленных на этих двух колоннах, производят потрясающее впечатление. Кроме этих двух знаменитых колонн, в храме находится древний колодец, украшенный резной колонной. В древнем тексте "Сканда Пурана" есть захватывающая легенда о том, как богиня Чанди получила имя Харсиддхи, в честь чего и был основан этот храм. История гласит, что однажды, когда Шива и Парвати были одни на горе Кайлаш, демоны Чанд и Прачанд решили напасть на них и уничтожить, Шива призвал на помощь богиню Чанди, которая и убила демонов.

Согласно преданиям, царь Викрамадитья был большим почитателем Мата Харсиддхи и неоднократно приезжал сюда на молитву.

Другие достопримечательности Удджайна