RSV bildades 1970 genom sammanslagning av olika myndigheter och organ inom skatteområdet (Riksskattenämnden, Centrala folkbokförings- och uppbördsnämnden, Kupongskattekontoret, Kupongskattenämnden och Allmänna ombudet hos Mellankommunala prövningsnämnden). Under 30 år var RSV även central valmyndighet, men ansvaret för valfrågor övertogs 2001 av Valmyndigheten. RSV uppgick 2004 i Skatteverket.