Em primeiro lugar você deve conhecer o IP do seu roteador e depois deve entrar na página internet do roteador pelo navegador altere a senha.
Conhecer o IP: abra o menu Inicial do Windows e abra o Executar > digite IP config para entrar no Prompt de comandos (tela preta). Digite CMD e busque Gatway Padrão. Copie o número ao lado do Gatway e cole no navegador para acessar a página internet do roteador. Você verá aparecer o login, clique em esqueci a senha. A partir daí tudo depende da marca do roteador
Para fazer a operação pelo celular, deverá baixar um aplicativo que suporte o gerenciamento do roteador, tipo o Tether TP do roteador TP-Link. Busque um gerenciador de Android que pode fazer esta operação.