Skarholt gikk på Skjetlein landbruksskole 1911-1913,[4] og overtok farsgården i 1916.
Han ble medlem av Arbeiderpartiet i 1918. Etter partisplittelsen i 1923 var Skarholt formann i Orkdal avdeling av Norges Kommunistiske Parti fram til 1927.[5] Han gikk over til AP, og ble fra 1928 sekretær i Orkdal arbeiderparti.
Skarholt ble valgt inn i herredsstyret i Orkdal i 1920, og satt i formannskapet fra 1921. Her ble han sittende frem til 1951. Skarholt ble valgt inn på Stortinget i 1934, og representerte der Sør-Trøndelag frem til sin død. Han satt blant annet i Landbrukskomiteen. Han var også Lagtingets visesekretær i en tiårsperiode.
Han ble arrestert under krigen, og satt i Vollan kretsfengsel fra januar til mai 1945.