Baseball America classe Brown meilleur joueur d'avenir dans le réseau de filiales des Phillies en 2009[3]. Le voltigeur se classe en 2010 au 14erang des meilleurs joueurs d'avenir des Ligues majeures selon MLB.com[4], et premier dans l'organisation des Phillies[1].
Le jeune Brown fait ses débuts dans les majeures le à Philadelphie, dans un match des Phillies face aux Diamondbacks de l'Arizona. Il frappe deux coups sûrs en trois présences au bâton officielles et produit deux points. Il obtient un double face au lanceurEdwin Jackson à sa première présence[7],[8]. Le face aux Dodgers de Los Angeles, Brown connaît un match de quatre points produits dans lequel il frappe son premier circuit en carrière, un coup en solo aux dépens du lanceur Ronald Belisario[9]. Brown termine l'année avec les Phillies et frappe dans une moyenne au bâton de ,210 avec deux circuits et 13 points produits en 35 rencontres.
En 2011, il frappe cinq circuits et produit 19 points en 56 parties pour les Phillies.
Brown ne s'impose toujours pas en 2012 comme le voltigeur d'avenir que les Phillies voyaient en lui. Limité à 56 parties jouées, il ne frappe que pour ,235 avec 5 circuits et 26 points produits.
Il connaît en revanche un fort début de saison 2013 et est même nommé meilleur joueur de mai dans la Ligue nationale après avoir claqué 12 circuits et produit 25 points durant ce mois. En , sa moyenne de puissance est de ,688[10].
