Ambos jugadores conectados al mismo wifi.
Uno crea la partida, pulsa escape y en el menú le da a "Abrir en LAN"
El otro le da a juego en red, y automaticamente buscará partidas en su red local (la de tu casa), ahi podrá entrar.
Si no hay problema de puertos abiertos, de que el firewall de windows no se fie de la red o cosas raras, deberiais de poder jugar juntos sin problema.