Desconozco por completo todo este tema de conexiones de red y tal, pero mi suposición es que, creyendo que juega contigo y ambos se conectan de la misma red, tú eres el primero en cargar Ark y la red te otorga la mayor prioridad, mientras que en la PC de tu hermano va lento porque tu estás utilizando demasiado ancho de banda.
Es eso o es porque sigue siendo Early Access y la PC de tu hermano es una entre decenas de pcs que tienen errores particulares en la ejecución del juego