Brown se convirtió en el primer jugador de color que bateó un cuadrangular en la Liga Americana y fue contra el lanzador estrella de "Los Tigres" de Detroit Hal Newhouser, que ese año ganó 17 juegos y en los años de 1944 y 1945 había sido seleccionado el mas valioso de la Liga Americana, estableciendo un record que aun perduró para un lanzador. Brown fue el segundo negro en jugar en esa liga siguiéndole los pasos a Larry Doby que lo hizo con "Los Indiós" de Cleveland unos meses antes. Brown no pudo utilizar más el bate del cuadrangular ya que un compañero suyo lo rompió al consumir un turno al bate.

Llegó a San Luis directamente del béisbol negro sin pasar por las Ligas Menores como fue el caso de Jackie Robinson que si estuvo en la sucursal de Brooklyn en el equipo Triple A "Montreal Royals".Al no tener un ajuste en Ligas Menores esto parece que le afectó en su rendimiento con "Los Carmelitas" de San Luis que poco después lo dejaron libre. Solamente participó en 32 juegos. Tenía de compañero a otro jugador negro Henry Thompson, que participó en 21 juegos y también fue dejado libre. Para aquel tiempo se rumoraba que los dueños de San Luis los firmaron para que no se les acusara de racistas, pero a decir verdad nunca tuvieron interés en retenerlos en el equipo.

Los que creían que Willard Brown ya estaba en el ocaso de su carrera béisbolística se equivocaron pues ese mismo año de 1947 "quemó" la Liga de Puerto Rico, proclamándose campeón bate con promedio de .432. Esa temporada (1947-1948) conectó 27 cuadrangulares (record que aun perdura), empujo 86 carreras (líder) y fue proclamado como "el Jugador Mas Valioso de la temporada", todo esto con Santurce.Este equipo de 1947-48 es considerado como el mas completo que ha existido en nuestro béisbol profesional. A este "team" se le llamó "el escuadron del pánico" liderado por su dirigente Vie Harris, su receptor Mickey Taborn, su lanzador y guardabosque Ford Smith, Bob Thurman y Brown.

Sin embargo, Santurce no fue el campeón en esa temporada y si "Los Criollos" de Caguas. Pero para otros entendidos en la materia, el equipo mas poderoso fue Santurce 1954-55 que contaba en sus filas con Buster Clarkson (tercera), Bob Thurman (guardabosque), George Crowe (primera), Roberto Clemente (guardabosque) y Willie Mays. Brown no formaba parte de ese Trabuco. A este equipo también se le llamá el escuadrón del pánico. Ganó el campeonato en Puerto Rico y la Serie del Caribe en Venezuela con cinco victories y una derrota. Su derrota fue con Venezuela 7-2 en el último juego donde el equipo jugó con sus reservas ya que había asegurado el campeonato el día anterior.

En ese juego el dirigente Herman Franks fue criticado y abucheando por los fanáticos boricuas que esperaban que nuestro equipo terminara invicto en esa serie. Ese equipo de Santurce de 1954-55 también se le conoce en la historia deportiva boricua como "la maquinaria perfecta". Como señalamos, Brown jugó con "Los Monarcas" de Kansas City en el béisbol de color. Alli tenía de compañeros a algunos jugadores conocidos en Puerto Rico como John Ford Smith, lanzador y guardabosques que jugó con Santurce; James Greene quien jugó con Humacao; Hilton Smith, lanzador de Ponce y a Connie Johnson lanzador de Caguas.Brown comenzó jugando en la Isla en el torneo de 1941-42 con "Los Grises" de Humacao cuando esta ciudad tenía franquicia profesional.

A mitad de temporada el equipo de Humacao pasó a Arecibo. Los refuerzos de Humacao eran jugadores de color. Además de Brown estaban James Greene y Judy Wilson. Luego Brown estuvo tres temporadas fuera de nuestro béisbol regresando en la temporada de 1946-47 con "Los Cangrejeros" de Santurce donde estuvo hasta la de 1953-54, ocho temporadas en línea. En ese lapso de tiempo le dio dos campeonatos a su equipo: 1950-51 y 1953-54. En la temporada de 1946-47 fue el campeón bate con el alto promedio de .390. En el torneo de 1947-48 volvió a ser el campeón de bateo, esta vez con un astronómico .432. También fue líder en jonrones con 27 (marca que aun existe) y carreras empujadas con 86 y anotadas con 79. Con esta actuación ganó la triple corona y fue seleccionado como el Jugador más Valioso.

Para la temporada de 1948-49 fue líder en jonrones con 18, empatando con Bob Thurman, su compañero en Santurce. De nuevo fue campeón bate con .354 y en jonrones con 16 y carreras empujadas con 97 (marca que aun perdura) en la temporada de 1949-50.En resumen Brown en su estadía en Puerto Rico tuvo tres títulos de bateo, cuatro de carreras empujadas, dos triple coronas y dos como el más valioso. De los 27 cuadrangulares que conectó en 1947-48, tres se los conectó a Alonso Perry, zurdo panameño de Mayagüez, tres a Dwayne Sloat, zurdo de Aguadilla y dos a Johnny Davis derecho Americano de Mayagüez en el mismo juego. También le conectó dos a cada uno de "Los Senadores" de San Juan, los derechos boricuas José L. Velázquez y Francisco Sostre.

A este último fue en el mismo juego. Brown era el alma del equipo de Santurce.

Conocido en Puerto Rico como "Ese hombre", Brown conectó el cuadrangular número 27 el 14 de febrero de 1948 contra el lanzador zurdo de bola rápida Eugene Collins de "Los Criollos" de Caguas en la séptima entrada en el parque Sixto Escobar. Santurce ganó 10-9. Ese año en el mes de enero dió 8 jonrones todos en el Sixto Escobar. Seis de ellos fueron contra lanzadores importados.

Willard James Brown bateaba y tiraba a lo derecho. Casi nunca se ponchaba

Además de ganar varios campeonatos en la ofensiva, era un jugador defensivo aceptable que aunque no tenía un brazo poderoso cubría bien el bosque central para "Los Cangrejeros" de Santurce. En las Series del Caribe en que participó tuvo una actuación sobresaliente. En la serie celebrada en la Habana, Cuba en 1953, Santurce fue el campeón invicto en seis salidas, derrotando fácilmente a los equipos de Cuba, Venezuela y Panamá. En esa serie Brown atizo cuatro cuadrangulares impulsando trece carreras (record para un jugador de Puerto Rico) siendo proclamado como "el jugador mas valioso de la Serie". El dirigente de este equipo fue su compañero Buster Clarkson quien jugaba la tercera base.

Brown fue exaltado al Salón de la Fama de las Series del Caribe junto a los latinos Ricardo Carty (dominicano), Camilo Pascual (cubano) y Héctor Espino (mexicano). También esta en el Salón de la Fama del Deporte puertorriqueño. Pero volviendo a su paso fugaz por las Grandes Ligas, siempre pensamos en las razones que tuvieron los dueños de "Los Browns" (Carmelitos) de San Luis para dejar libre a Brown sin darle el tiempo suficiente para demostrar su valía. Allí jugó en los bosques y en primera.

Creemos que este los hubiera ayudado a mejorar sus actuaciones, ya que en los últimos años de la década de 1940 San Luis se había convertido en un equipo mediocre después que fueron campeones de su liga en 1944. Brown había demostrado todo su poderío tanto con el Kansas City como en las ligas del Caribe.En el poco tiempo que estuvo con San Luis esta fue su actuación: participó en 32 juegos; 67 turnos al bate; 12 "hits"; 4 carreras empujadas; 8 anotadas; 2 dobles; 1 cuadrangular; 7 ponches y ninguna base por bolas. Su promedio fue de .179. Ese año San Luis terminó último. En 1953 la franquicia de "Los Browns" pasó a la ciudad de Baltimore, hogar de "Los Orioles" hoy día.

Brown jugó en la Liga Mexicana con buenas actuaciones. En 1940 con el nuevo Laredo conectó para .354 con ocho jonrones y sesenta y una carreras empujadas y en 1941 actuí con "Los Pericos" de Puebla bateando .254 y 24 impulsadas.

En esa liga de México jugaban varias estrellas negras como Joshua Gibson, Willie Wells, Ray Dandridge y Bud Barbee, bien conocidos aquí. Los famosos lanzadores cubanos Ramon Bragana, Lázaro Salazar y Martin Dihigo también participaron. En Santo Domingo participó con "Los Leones" del Escogido donde tuvo gran actuación. Volviendo al poderoso equipo de Santurce del 1954-55 este fue dirigido por Herman Franks, que era "coach" de "Los Gigantes" de Nueva York de las Grandes Ligas. Una vez se le preguntó a Franks que opinión tenía sobre ese equipo de Santurce y esta fue su contestación: "Este equipo de Santurce, con un poco de mas profundidad, hubiera podido competir contra cualquier novena de las Grandes Ligas". Luis Rodriguez Olmo ex estrella de "Los Dodgers" de Brooklyn comento: "Es el mejor equipo para el cual yo he jugado". Bob Thurman que jugó con Cincinnati señaló: "Es el mejor equipo que he conocido".

Brown no formó parte de ese "team", pero estuvo a punto de lograrlo. Resulta que en esa temporada Santurce estaba rondando por el sótano al principio. Aquí Pedrín Zorrilla dueño de "Los Cangrejeros" lo mandó a buscar como seguro de vida. Ya tenía 38 años y había perdido parte de sus habilidades. Santurce mejoró grandemente y no utilizaron a Brown, y lo demás es historia. El 4 de agosto de 1996 "ese hombre" James Willard Brown murió.