Antes de mais nada, é preciso conhecer o IP do computador (pelas propriedades da conexão no computador ou pelo prompt de Comando digitando ipconfig. Depois inseri-lo no navegador para acessar a página web do roteador.
Na página aberta, você verá os campos com os identificadores: nome de usuário e senha. Dependendo do roteador a alteração de nome senha pode ser feita nesta mesma interface, caso não tiver esta opção, busque no menu do lado esquerdo da página, Setting Password ou Segurança ou algo parecido e altere os dados que quiser. Não esqueça de salvar as modificações antes de fechar a página web do roteador.