இந்தியாவில் இரண்டு இடங்களில் மட்டுமே காலபைரவருக்குத் தனி ஆலயம் உள்ளது. முதலாவது ஆலயம் காசியில் அமைந்துள்ளது. இரண்டாவது ஆலயம் தமிழ்நாட்டில் உள்ள தருமபுரி மாவட்டம் அதியமான் கோட்டையில் அமைந்துள்ளது. அதியமான் கோட்டையில் அமைந்துள்ள தட்சணகாசி காலபைரவர் ஆலயம் 1,200 ஆண்டுகள் பழமையானது.
இந்த ஆலயத்தில் ஒவ்வொரு தேய்பிறை அஷ்டமி தினத்தில் பக்தர்கள் சுவாமி தரிசனம் செய்வது வழக்கம். கார்த்திகையில் வரும் தேய்பிறை அஷ்டமி காலபைரவர் ஜெயந்தியாக கொண்டாடப்படுகிறது. அதன்படி இன்று (டிசம்பர் 8) தேய்பிறை அஷ்டமி காலபைரவர் ஜெயந்தியை முன்னிட்டு அதிகாலை சுவாமிக்கு சிறப்புத் திருமுழுக்கு ஆராதனை நடைபெற்றது.