Tem como você descobrir sim, mas não é 100% de certeza que funcione.
Use essa ferramenta: link
1 - Baixe o jar e coloque na mesma pasta da sua keystore, em seguida execute o segundo comando:
java -jar AndroidKeystoreBrute_v1.05.jar -m 3 -k sua-keystore.jks -d sua-lista-de-palavras.txt
Eu testei em uma keystore na qual havia botado duas palavras e mais 3 numeros como senha, sendo a primeira letra da senha com letra maiuscula.
Na minha lista de palavras eu apenas forneci as duas palavras que estavam na senha. A letra maiuscula para a primeira é adicionada automaticamente bem como os números. Na sua lista você coloca as palavras que acha que estariam na senha (caso acha que tenha uma data, coloque também)
Sua lista pode ficar assim:
primeiraPalavra
segundaPalavra
01032016
Eu recebi a seguinte resposta ao executar:
Got Password in 12 seconds
Bem como a senha e o alias que usei. Deixe executando e boa sorte!