Em resumo, utilize preload em recursos críticos da página atual e prefetch em páginas futuras ou com menos prioridade. Preload força o download enquanto que o prefetch faz o download quando o browser está ocioso.