Eso suele ocurrir cuando las visitas al vídeos son recurrentes y/o cuando dejan de visualizar el vídeo antes que termine y/o no comentan y/o no valoran el vídeo, lo que da a pensar que fueron fruto de una atracción artificial al solo efecto de inflar las estadísticas. A estas visitas las podríamos catalogar como de "mala calidad" (ni hablar de las que el dueño del vídeo realiza en su desesperación por ver como van las estadistas)
Para que esto no ocurra lo mejor es no avisar a amigos yo parientes de la subida del vídeo, no hacer spam en sitios que no existan personas a fin al vídeo, etc. Lo mejor y mas "saludables" es que las visitas provengan de un interés natural provenientes de los buscadores y si el vídeo es lo que buscan, de seguro lo verán de comienzo a fin, valorarán y/o comentarán positivamente y tal vez se suscriban,
Saludos.