Parallellt med sin militära tjänstgöring var Arsenius verksam som målare med hästar och hundar som främsta motiv. Han var elev till Carl Wahlbom, dåtidens ledande svenske djurmålare. Han utförde hästporträtt men även ryttarporträtt och genrebilder från militärliv och marknader.