Es sencillo, ve a su canal, y veras que donde anteriormente decía "Agregar amigo" dira "Suprimir amigo", le das click y listo.
Te recomiendo no eliminar amigos, ya que cuando subes un video ellos son notificados y tienes más posibilidades de que tu video sea mas visto. Aunque claro, si es uno de esos, trolls, o una persona que te molesta, pues a eliminarlo.