Normalmente tendrás que configurar una serie de parámetros en el router dependiendo de tu proveedor de internet. Si googleas un poco buscando el modelo de router que tienes y tutoriales de configuración, seguramente encuentres que es lo que tienes que cambiar exactamente para cada compañía, a no ser que tengas un router mu "raro" y que nadie haya colgado documentación al respecto.
Saludos.