Han forteller selv: ”1738 kiøpte mig en Pr. Leutn. Plads ved det Sandsværske Compagniet, hvorfra 1748 blev kaldet quales til Capitaine Lieutenat ved General Major Heineman for min Tour. 1751 accorderet mig mig til Landeværns-Compagniet, 1753 ligesaa til staaende Compagnie, hvormed gikk til Holsten 1758; derfra kom tilbage som 3die Major 1761. 1766 avanceret til Sec. Major, 1772 til Pr. Major, 1774 benaadet med Oberstlieutenats Caracteer, alt i det 1ste Aegershuuske Regiment, Indtil 1777, ‎(da)‎ Jeg d. 23de Julii er bleven kaldet til virkelig Oberstlieutenant ved det 1ste Oplandske Inf. Regt. Med det Ringeboske Comp. I Gulbrandsdalen. Anno 1872 22/5 ‎(Blev)‎ Jeg forflyttet til det 2det Oplandske Regiment med det Totenske Comp. 1783 22/10 erholdt Oberst Caracter, 1784 faaet Compagni i Eidsvold, 1788 25/1 erholdt Afsked med 500 Rdl. Pension.”
I 1749 kjøpte han gården Hovind i Aker for 3500 rdl. Her bodde han til sin død.
Han datter Helle Margrethe Crøger siger om han: ”Oberst Georg Neumann sjulde, som han beretter, været Præst. Den 1ste Gang, han skulde prædige, bad han sin moder ei at komme i Kirken. Men denne Bøn blev ikke opfyldt, thi den Første, hans Øye faldt paa, da han kom på Prædikkestolen, var hans Moder. Dette Syn overrasket han saaledes, at han denne Gang holdt baade sin første og sidste Prædikken.
Han var en meget smuk Mand og kjendtes i Holsten som ”den smukke Officeer paa den sorte
Hest”; han var meget stærk, saa han kunde klemme en Hestsko sammen mellem Hænderne og en Nød i Klypen. Dog blev en Okse Aarsagen til hans Død. Han blev nemlig værgeløs overfaldt av den; og efter en lang Kamp omsider den Mester, men fik herefter stedse Smerter i Ryggen og Armene, der efter mange Aars Forløb omsider blev hans Bansot. Hans Caracteer var rolig og alvorlig, men en opriktig og ærlig Mand.”
Det er han, der har antaget familenavnet Neumann. Han har selv udtalt sig derom saaledes: ”Med hensyn til Farfader Jørgen Poulsens Fødsel og Herkomst vil jeg herved have erindret, at hans Moder havde Tilnavnet Niemand, hvoraf først Jeg og siden mine sødskendebørn har tiltaget os det Binavn Neuman.”