En marzo de 2012, Brown recaló en los Milwaukee Bucks junto a Monta Ellis y Ekpe Udoh, en un intercambio por Andrew Bogut y Stephen Jackson.