I hans første band (1946–) fant man Nora Brockstedt som medlem av en vokalkvintett. Hans eget turnéorkester (1951–) hadde blant annet Arvid Gram Paulsen, Arne Hermandsen, Øistein Ringstad og Eivin Sannes i besetningen, og Brown ledet også eget storband (1957). Etter flytting til Røros (1980) ledet han egen trio til plateutgivelse og etablerte «Adventjazz». I jazzen finner man også den amerikanske altsaksofonisten Pete Brown (1906–61).
Hans far var Thomas Brown fra Liberia som var slangedanser og fakir, gift med Carolina Brown som også var artist. De reiste sammen sammen med Thomas sine foreldre Sam Brown (1870–1938) og Gustava Brown (–1939), og ble i 1915 engasjert av Cirkus Empress og bosatte seg på Lillestrøm. Pete Brown ble født i 1921 da ensemblet oppholdt seg i Trondheim. Etter foreldrene reiste til Latin-Amerika i 1928, var Pete bosatt hos besteforeldrene. Sammen med adoptivsøsteren Jossie Pollard (1921–2000) ble de av besteforeldrene sendt på turne, etter hvert antok paret på eget initiativ turneen som «The Two Chocolate Kids».[5][6][7]