Con la otra pc que probaste también tenías la misma latencia? Comprobaste que el problema no sea específicamente con Wow Arg(cuando te ande mal podes probar con otros juegos en internet)?
Durante que horas de la noche te suele ocurrir?