Contando con que hayas instalado los drivers de la ethernet y demás... windows xp tiene un asistente bastante sencillo en panel de control / conexiones de red / configurar una red doméstica o para pequeña oficina.
Aparte, como dicen, hay bastantes manuales.
Saludos.