Prueba
SELECT t.teamid, COUNT(p.team) player_count
FROM team t LEFT JOIN
player p ON p.team = t.teamid
GROUP BY t.teamid
Dará el evento de resultado correcto si algunos equipos no tienen jugadores asignados. Ver sqlfiddle para eso (el equipo 3 no tiene jugadores).