Você deve alterar a senha pelo computador se não vai ter que baixar um aplicativo compatível com seu celular para fazer isso pelo celular.
Pelo computador, digite o IP no navegador para abrir a página web do roteador. Para conhecer o IP acesse as propriedades da conexão no computador ou pelo prompt de Comando digitando ipconfig.
Na página aberta, você verá os campos com os identificadores: nome de usuário e senha. Dependendo do roteador a alteração de nome senha pode ser feita nesta mesma interface, caso não tiver esta opção, busque no menu do lado esquerdo da página, Setting Password ou Segurança ou algo parecido e altere os dados que quiser. Não esqueça de salvar as modificações antes de fechar a página web do roteador.