Suponiendo que tengas en el ordenador Windows, haz un ipconfig desde el inteprete de comandos (símbolo de sistema)
Te tendra que salir una ip en la puerta de enlace predeterminada, con dicha ip es con la que tienes que entrar en la configuración del router desde el navegador.