Shri V.S.Muthuswamy Pillai est issu d’une famille de Nattuvanar, maîtres de danse, qui travaillaient pour le service du temple depuis cinq générations. Son père s’appelait Vaidyanatha Pillai, son grand-père Meenakshi Sundaram Pillai, son arrière grand-père Muthuswamy Pillai, son arrière arrière grand-père Mahadeva Pillai. Ses ancêtres étaient des musiciens célèbres des cours royales et étaient appelés « Ashtana Vidvan ».
Muthuswamy a été formé par son père à l’âge de huit ans à la danse et au chant. A seize ans, il fut envoyé chez le maître
Manarkudi Muthukumara Pillai, qui avait formé des danseurs célèbres comme Ram Gopal, Mrinalini Sarabai ou
Rukmini Devi Arundale.
A vingt ans, il enseignait aux devadasi Yogam Mangalam, Tiruchur Premavathi, Vellur Rajalakshmi, L.Vayjayanthimala, et les accompagnait durant les rituels dans le temple et pour les cérémonies de mariage des gens fortunés.
Avec l’abolition du système des devadasi, les maîtres de danse se retrouvent sans emploi, et émigrent vers les villes pour trouver du travail. Son grand-père Meenakshi Sundaram Pillai se met à travailler pour le cinéma.