¿Tenías los 2 routers configurados como servidor DHCP?
Si ahora has dejado como servidor DHCP el router de jazztel, te debería asignar correctamente todos los datos de configuración de la red, DNS incluídos. No obstante, puedes probar a ponerle manualmente las DNS y ver si así puedes navegar.
Si pruebas a hacer ping a 192.168.1.1 ¿te responde?
Un saludo.