कालड़ी का तीर्थस्थल भारतीय दार्शनिक आदि शंकराचार्य के जन्मस्थान के रूप में प्रसिद्ध है, जिनका जन्म 8 वीं शताब्दी में हुआ था। कालड़ी में दो मूर्तियां हैं- एक दक्षिणामूर्ति और दूसरी देवी शारदा की। कालड़ी कई मंदिरों से सुसज्जित है, जिनमें से सबसे महत्वपूर्ण हैं श्री कृष्ण मंदिर, माणिकमंगलम मंदिर और श्री आदि शंकर कीर्थी मंडपम। आसपास फैले आध्यात्मिक उत्साह में डूबने के लिए, भक्त क्षेत्र के विभिन्न घाटों पर जा सकते हैं जो शांति से सराबोर हैं। पर्यटक लोकप्रिय क्रोकोडाइल घाट पर भी जा सकते हैं, जहां कहा जाता है कि एक मगरमच्छ ने एक बार युवा शंकराचार्य को पकड़ा था।

किंवदंती है कि एक दिन, शंकराचार्य की विधवा मां जब पूर्णा नदी में स्नान करने के लिए गई थीं तो बेहोश हो गई थीं। तब उनके पुत्र ने  भगवान कृष्ण से मदद के लिए प्रार्थना की और स्वामी ने उसे आशीर्वाद दिया और कहा कि जहां-जहां उसके कदम पड़ेंगे, वहीं नदी बहने लगेगी। इस प्रकार, नदी ने अपना रास्ता बदल दिया और यहां बहना शुरू कर दिया, और इस क्षेत्र को कालड़ी के रूप में जाना जाने लगा, जिसका अर्थ है पैर।