si vas a usar un dispositivo que sera intermediario y hara las conexiones, es decir, el router debes usar el Modo InfraEstructura.
Si vas a realizar la conexion directa entre cada euqipo sin ningun intermediario, debes usar el modo Ad Hoc. A cada maquina les deberas asignar de manera manual su IP, mascara de subred y puerta de enlace y claro todos deben tener el mismo grupo de trabajo y en Windows usar el asistente de configuracion para crear una red casera o de oficina sencilla.
Por IP pueden poner 192.168.1.x donde X sera un numero entre 0 y 250 y se refiere al numero en cada maquina.
Por submascara de red usan 255.255.255.0
Por puerta de enlace ponen la IP de la computadora que va a ser el servidor del juego.