pues, si no me equivoco (y si me equivoco, que alguien me corrija), necesitarás una tarjeta de red para cada uno de los ordenadores. creo que el modem tb se puede utilizar como tarjeta de red, pero no estoy seguro, así te ahorrarías una de ellas.
lo que puedes hacer es, en vez de coger 2 inhalambricas (que te saldrán por un ojo de la cara), poner el router al lado de uno de los ordenadores y enchufarlo por cable RJ-45 a ese ordenador con una tarj. de red normal, y en el otro enchufarle la inhalámbrica.
cuando te pilles la tarj. inhalámbrica asegurate que utiliza los mismo protocolos tanto el router como la tarj. si el router es nuevillo, seguramente utilizará el 802.11g.
ya solo te faltará configurar los ordenadores y la red para poder entrar a inet y tenerlos en red. aquí yo ya me pierdo un poco. estoy esperando que me llegue el router y la tarj. de red para empezar a montarlo todo como tú, ya que tenía + o - la misma idea a la hora de montar los ordenadores de mi casa.