கும்பகோணத்தின் தோற்றம் மற்றும் மகாமகம் திருவிழாவுடன் நேரடியாக தொடர்புடைய 12 கோவில்களில் இதுவும் ஒன்று. அந்த புராணத்தின் படி, பிரம்மா அனைத்து உயிரினங்களின் விதைகளையும், வேதங்கள் மற்றும் புராணங்களையும் சேர்த்து, ஒரு குடத்தில் அமிர்த கலசம் (அமிர்த பானை) என்று அழைக்கப்பட்டார். கும்பம் என்பது சமஸ்கிருதம் மற்றும் குடம் என்பது தமிழ், இந்த வகை பானைக்கு. இதனை மலர்கள், வில்வம், மங்கள வஸ்திரம், சந்தனம் (சந்தனம் பச்சரிசி) போன்ற பல்வேறு பொருட்களால் அலங்கரித்து, அதன் மேல் தேங்காயை வைத்து புனித நூல் வைக்கப்பட்டது. இன்று நாம் வீட்டு விழாக்களிலும் கோவில்களிலும் காணும் கலசங்களைப் போலவே மொத்தமும் ஒன்றாகக் கட்டப்பட்டது. பானை மேரு மலையின் உச்சியில் வைக்கப்பட்டது. பிரளயம் தொடங்கிய போது, பூமியில் உள்ள அனைத்து உயிரினங்களையும் அழித்தது. பிரம்மா தயாரித்த கும்பமும் இடம்பெயர்ந்து, பல ஆண்டுகளாக வெள்ள நீரில் மிதந்தது. இறுதியாக, அது ஒரு இடத்தில் குடியேறியது (இது நவீன கும்பகோணம் என்று கருதப்படுகிறது). சிவன், வேட்டைக்காரன் வேடத்தில், தனது வில் மற்றும் அம்பினால் (சமஸ்கிருதத்தில் பானம்) கும்பத்தை உடைத்தான். கும்பத்தில் கட்டப்பட்ட புனித நூல் இங்கே விழுந்தது. (கும்பகோணத்தின் தோற்றம் மற்றும் தொடர்புடைய மகாமகம் பற்றிய முழு கதையையும் படிக்கவும்.)

கௌதம முனிவர் கும்பகோணத்திற்கு வந்து, பல்வேறு கோவில்களில் சிவனை வழிபட்டார். அவர் பசுக்களை மிகவும் விரும்பி, மிகுந்த அக்கறையுடனும், அன்புடனும், பாசத்துடனும் வளர்த்து வந்தார். ஆனால், முனிவரைப் பிடிக்காத சில அசுரர்கள், அவரது குணத்தில் கறை படிய வேண்டும் என்பதற்காக, மந்திர பசுவை உருவாக்கி, முனிவர் முன் ஆஜராகும்படி அனுப்பினர். முனிவர் இந்தப் பசுவைத் துழாவத் தொடங்கியதால், அது மறைந்தது. ஒரு பசுவின் முடிவைத் தான் ஏற்படுத்தியதாகவும், பசு-ஹத்ய தோஷம் என்ற பாவம் தன்னைப் பற்றிக்கொண்டதாகவும் முனிவர் நம்பியதால், ஏமாற்றம் அடைந்தார். அதனால் இங்குள்ள சிவனை வழிபட்டார். கௌதம முனிவரை அருகில் உள்ள மகாமகம் குளத்தில் நீராடுமாறு இறைவன் கட்டளையிட்டார். முனிவர் தான் உணர்ந்த பாவத்தை நம்புவதற்கு வழிவகுத்ததை உணர்ந்தார். இதனால் இங்குள்ள சிவன் கௌதமேஸ்வரர் என அழைக்கப்படுகிறார்.

புனித நூல் (ஸ்தல புராணத்துடன் தொடர்புடையது) சமஸ்கிருதத்தில் உபவீதம் என்று அழைக்கப்படுகிறது, எனவே இங்குள்ள சிவன் உபவீத நாதேஸ்வரர் என்றும் அழைக்கப்படுகிறார்.

கௌதம முனிவர் சம்பந்தப்பட்ட ஸ்தல புராணத்தில் இருந்து எழும் இது, பசுவின் மரணத்துடன் எந்த வித தொடர்பும் உள்ளவர்களுக்கான பரிகார ஸ்தலமாகும். மேலும், இந்த கோவிலுக்கு பசுவை தானம் செய்வதால் தானம் செய்பவருக்கு செல்வமும் வளமும் பெருகும் என்பது ஐதீகம்.

விருச்சிக ராசியில் பிறந்தவர்கள் இங்கு வழிபட்டால் பலன் கிடைக்கும் என்று சொல்லப்படும் இக்கோயில் சிறப்பு வாய்ந்தது. அஷ்டமி நாட்களில் இக்கோயிலில் பைரவரை வழிபடுவது பக்தர்களுக்கு பயத்திலிருந்து

விடுபடுவதாக ஐதீகம். ஞாயிற்றுக்கிழமைகளில் ராகுகாலத்தின் போது (மாலை 4.30 முதல் 6 மணி வரை) இங்கு சிறப்பு பூஜை நடைபெறுகிறது.

மையக் கோயிலும் கர்ப்பகிரஹமும் சோழர் காலத்தைச் சேர்ந்தவை என்றாலும், மற்ற கோயிலின் பெரும்பகுதி 16ஆம் நூற்றாண்டில் நாயக்கர் காலத்தைச் சேர்ந்தது. அமைதியற்ற நுழைவாயில் உள்ளே மிகவும் விரிவான மற்றும் விரிவான கோயிலுக்கு வழிவகுத்தது, அனைத்து பரிவார தெய்வங்களுக்கும், பைரவர் மற்றும் ஆஞ்சநேயர் ஆகியோருக்கும் சன்னதிகள் உள்ளன.