1908' de askerlikten ayrılarak, beden eğitimi konusunda ihtisas yapmak üzere İsveç'e gitti. 1910' da Türkiye'ye döndü. İsveç jimnastiğini Türk okullarına soktu. 12 Mayıs 1916 günü şahsî gayretiyle, Türkiye'de ilk idman bayramını düzenledi, Millî Olimpiyat komitesini kurdu. 1930' a kadar bu komitenin başkanı olarak çalıştı.
1935' de Millî Eğitim bakanlığı başmüfettişliğinden emekliye ayrıldı. 1935-46 yılları arasında Ordu milletvekili olarak meclise girdi. Beden eğitimi ve spor konusunda 40' dan fazla kitap yazan Selim Sırrı Tarcan, 1956' da İstanbul'da vefat etti.
