Hvad med:
select datepart(yyyy, [date]) as [year]
from shoptransfer
group by datepart(yyyy, [date])
Eller:
select count(*) as qty, datepart(yyyy, [date]) as [year]
from shoptransfer
group by datepart(yyyy, [date])
order by [year]
Dette er baseret på OP's kommando:"Jeg vil gruppere efter år, del af dato (varchar) kolonne"