Obtenga el recuento de elementos y sus valores en una columna

Puede seleccionar cada artículo de Items y LEFT JOIN MyTbl en el ItemID común , contando los partidos;

select 
   Items.itemId,
   count(MyTbl.itemId) as count
from Items
   left join MyTbl on (MyTbl.ItemID = Items.ItemID)
group by Items.itemId
order by Items.itemId