¿Cómo puedo dividir columnas con expresiones regulares para mover las MAYÚSCULAS finales a una columna separada?

Estoy tratando de dividir una columna usando expresiones regulares, pero parece que no puedo dividir correctamente. Estoy tratando de tomar todas las MAYÚSCULAS finales y moverlas a una columna separada. Así que obtengo todos los CAPS que son 2-4 CAPS seguidos. Sin embargo, solo sale de la 'Name'columna mientras la 'Team'columna está en blanco.

Aquí está mi código:

import pandas as pd

url = "https://www.espn.com/nba/stats/player/_/table/offensive/sort/avgAssists/dir/desc"

df = pd.read_html(url)[0].join(pd.read_html(url)[1])
df[['Name','Team']] = df['Name'].str.split('[A-Z]{2,4}', expand=True)  

Quiero esto:

print(df.head(5).to_string())
   RK             Name POS  GP   MIN   PTS  FGM   FGA   FG%  3PM  3PA   3P%  FTM  FTA   FT%  REB   AST  STL  BLK   TO  DD2  TD3    PER
0   1  LeBron JamesLA  SF  35  35.1  24.9  9.6  19.7  48.6  2.0  6.0  33.8  3.7  5.5  67.7  7.9  11.0  1.3  0.5  3.7   28    9  26.10
1   2   Ricky RubioPHX  PG  30  32.0  13.6  4.9  11.9  41.3  1.2  3.7  31.8  2.6  3.1  83.7  4.6   9.3  1.3  0.2  2.5   12    1  16.40
2   3   Luka DoncicDAL  SF  32  32.8  29.7  9.6  20.2  47.5  3.1  9.4  33.1  7.3  9.1  80.5  9.7   8.9  1.2  0.2  4.2   22   11  31.74
3   4   Ben SimmonsPHIL  PG  36  35.4  14.9  6.1  10.8  56.3  0.1  0.1  40.0  2.7  4.6  59.0  7.5   8.6  2.2  0.7  3.6   19    3  19.49
4   5    Trae YoungATL  PG  34  35.1  28.9  9.3  20.8  44.8  3.5  9.4  37.5  6.7  7.9  85.0  4.3   8.4  1.2  0.1  4.8   11    1  23.47

para convertirse en esto:

print(df.head(5).to_string())
   RK             Name    Team    POS  GP   MIN   PTS  FGM   FGA   FG%  3PM  3PA   3P%  FTM  FTA   FT%  REB   AST  STL  BLK   TO  DD2  TD3    PER
0   1  LeBron James        LA    SF  35  35.1  24.9  9.6  19.7  48.6  2.0  6.0  33.8  3.7  5.5  67.7  7.9  11.0  1.3  0.5  3.7   28    9  26.10
1   2   Ricky Rubio        PHX    PG  30  32.0  13.6  4.9  11.9  41.3  1.2  3.7  31.8  2.6  3.1  83.7  4.6   9.3  1.3  0.2  2.5   12    1  16.40
2   3   Luka Doncic        DAL    SF  32  32.8  29.7  9.6  20.2  47.5  3.1  9.4  33.1  7.3  9.1  80.5  9.7   8.9  1.2  0.2  4.2   22   11  31.74
3   4   Ben Simmons        PHIL    PG  36  35.4  14.9  6.1  10.8  56.3  0.1  0.1  40.0  2.7  4.6  59.0  7.5   8.6  2.2  0.7  3.6   19    3  19.49
4   5    Trae Young        ATL    PG  34  35.1  28.9  9.3  20.8  44.8  3.5  9.4  37.5  6.7  7.9  85.0  4.3   8.4  1.2  0.1  4.8   11    1  23.47

Puede extraer los datos en dos columnas utilizando una expresión regular como ^(.*?)([A-Z]+)$o ^(.*[^A-Z])([A-Z]+)$:

df[['Name','Team']] = df['Name'].str.extract('^(.*?)([A-Z]+)$', expand=True)

Esto mantendrá todo hasta el último carácter que no sea una letra mayúscula en el Grupo "Nombre" y las últimas letras mayúsculas en el Grupo "Equipo".

Vea la demostración de regex # 1 y la demostración de regex # 2

Detalles

• ^ - inicio de una cadena
• (.*?)- Grupo de captura 1: cero o más caracteres distintos de caracteres de salto de línea, el menor número posible
  o
  
• (.*[^A-Z]) - cualquier cero o más caracteres distintos de los caracteres de salto de línea, tantos como sea posible, hasta el último carácter que no sea una letra mayúscula ASCII (otorgada la coincidencia de patrones posterior) (tenga en cuenta que este patrón implica que hay al menos 1 carácter antes del carácter últimas letras mayúsculas)
• ([A-Z]+) - Captura del grupo 2: una o más letras mayúsculas ASCII
• $ - Fin de la cuerda.

He realizado algunas modificaciones en las funciones. Es posible que deba agregar el paquete re.

Es un poco manual, pero espero que esto sea suficiente. ¡Que tengas un gran día!

df_obj_skel = dict()
df_obj_skel['Name'] = list()
df_obj_skel['Team'] = list()
for index,row in df.iterrows():
    Name = row['Name']
    Findings = re.search('[A-Z]{2,4}$', Name)
    Refined_Team = Findings[0]
    Refined_Name = re.sub(Refined_Team + "$", "", Name)
    df_obj_skel['Team'].append(Refined_Team)
    df_obj_skel['Name'].append(Refined_Name)
df_final = pd.DataFrame(df_obj_skel)
print(df_final)