Creo (repito, creo) que si ya tiene otro router que te esté cogiendo la señal del enchufe de telefono(el que segú tu está en el piso de abajo) puedes:
1.-Resetear el router ese de telefonica
2.-Meterte a su configuración.>Lo conectas por cable al pc.>en la barra de dirección 192.168.1.1->Clave 1234 y 1234->Has de cambiarle al router la IP por defecto(que es 192.168.1.1 y ponerle otra como 192.168.1.2 para que los dos routers "se entiendan" entre ellos y no se "solapen"(La ip es como la matricula del coche, no puede haber dos iguales) y desactivarle una cosa llamda DHCP.
3.-Luego conectas el cable de red a unos de los 4 puertos del router y te configuras el wifi a tu gusto.
Yo tengo hecho algo parecido, pero por wifi.Aun así, creo que debería de funcionarte.
Si me dices que el modelo del router de telefonica es un XABI 7968 o algún número parecido te hago un tutorial más detallado.
Un saludo.