विजयनगर किला, बिग टेम्पल या ब्रहदेश्वर उत्तर पूर्व में दो किलोमीटर की दूरी पर स्थित है। 16 वीं शताब्दी के मध्य के दौरान, नायक और मराठा शासक, इसके निर्माण के लिए उत्तरदायी हैं। तंजौर पैलेस, संगीत महल, तंजौर आर्ट गैलरी, शिव गंगा गार्डन और संगीत महल पुस्तकालय सभी किले में स्थित हैं।
किले के निर्माण का मुख्य उद्देश्य, दुश्मन और घुसपैठियों से महल की रक्षा करना था। किले के अधिकांश हिस्सा अब खंडहर रूप में है, और इसके कई हिस्से आम जनता के लिए एक आकर्षण के रूप में खुले हुए हैं। कला, वास्तुकला और इतिहास में रुचि रखने वाले पर्यटकों को, किले और इसके अंदर बसे अन्य आकर्षण का दौरा करने के लिए लगभग आधे दिन घूमने की सलाह रहती है, ताकि कोई भी महत्वपूर्ण चीज देखने से छूट न जाये।