Hola,
El tema está en ir jugando con la comprensión y calidad del video.
Mi recomendación es que si realmente no tienes prisa, subas el video de la forma mas original posible.
Es decir, sin bajar de calidad o cambiando parámetros del video, para que pese menos ya que puede afectar mucho en el resultado final en YouTube.
¡Saludos!