वडनगर गांव का इतिहास 7वीं शताब्दी से शुरू होता है। यहां पर बहुत सारे बौद्ध विहार हैं जिसे दूसरी से सातवीं शताब्दी के बीच बनाया गया था। यहां का सबसे लोकप्रिय बौद्ध विहार अपने स्तूपों के लिए जाना जाता है। इसमें एक खुला केंद्रीय प्रांगण भी है। इस बौद्ध विहार के चारों ओर नौ कक्षों का निर्माण इस तरह से किया गया था कि वे एक स्वस्तिक, एक पवित्र हिंदू प्रतीक के समान एक पैटर्न बनाते हैं। वडनगर अपने खूबसूरत तोरणों या मेहराबों के लिए भी प्रसिद्ध है। लाल और पीले बलुआ पत्थरों से निर्मित 40 फिट की ऊंचाई वाला कीर्ति तोरण इनमें सबसे प्रसिद्ध है।

चीनी यात्री ह्वेनत्सांग के यात्रा वृत्तांतों में इस गांव का उल्लेख मिलता है। यह चीनी यात्री 7वीं शताब्दी में भारत आया था। पुराणों में भी इसका उल्लेख किया गया है। वडनगर भारत के प्रधानमंत्री नरेंद्र मोदी का भी जन्मस्थान है।