Per cancellare le cache delle icone senza riavviare il nostro pc, apriamo il CMD propt dei commandi e digitiamo:

ie4uinit.exe -ClearIconCache
tutto qua.