Hola T. Florez, bienvenid@ al foro de ayuda de Chrome.
Cuando tengas los dos iconos en la barra de inicio, elimina el que solo es acceso directo con clic derecho "desanclar de la barra de tareas" y al que indica las ventanas abiertas hazle clic derecho "anclar..."
Espero que esto te sirva.