Eso ocurrirá siempre que el vídeo no se haya bajado completo y se esté reproduciendo en la medida que va bajando.
Sin embargo, aunque ya haya bajado completo te puede seguir ocurriendo si usas Firefox, y ocurre con cualquier página de vídeos y a más de una persona -no solo a mi- porque es una queja frecuente en su foro de soporte.
Prueba con otro navegador y avisa.