Baumann lärde sig tegelbyggandets konst av P.V. Jensen-Klint. Hans talrika villor och hyreshus är väsentliga för Köpenhamns bostadsarkitektur från perioden 1905–40. Särskilt storgårdskvarteren vid Struenseegade (1919–20) blev typbildande.