¿Qué tipo de encriptación usas para codificar la señal?
Windows XP, y creo, Vista, tienen un pequeño problema con las claves WAP-TKIP; por lo visto tiende a desconectarse con frecuencia (sin perder la señal).
Lo que se recomienda en cualquier caso es usar el programa que traía tu adaptador de red inalámbrica para establecer la conexión a la red (en lugar del predeterminado por Windows).
Tampoco estaría de más que actualizaras el firmware de tu router si es posible.
Un saludo.