Estou desenvolvendo um modelo de machine learning usando a biblioteca keras e percebo que as funções de perda disponíveis não estão dando os melhores resultados no meu conjunto de testes.
Estou usando uma arquitetura Unet, onde eu entro com uma imagem (16,16,3) e a rede também gera uma imagem (16,16,3) (auto-encoder). Percebi que talvez uma maneira de melhorar o modelo seria se eu usasse uma função de perda que compara pixel a pixel nos gradientes da imagem (laplaciano) entre a saída da rede e o conjunto de ground truth. No entanto, eu não encontrei nenhum tutorial que pudesse lidar com esse tipo de aplicação, porque ela precisaria usar a função laplacian do opencv em cada imagem de saída da rede.
A função de perda seria algo assim:
def laplacian_loss(y_true, y_pred):
# y_true already is the calculated gradients, only needs to compute on the y_pred
# calculates the gradients for each predicted image
y_pred_lap = []
for img in y_pred:
laplacian = cv2.Laplacian( np.float64(img), cv2.CV_64F )
y_pred_lap.append( laplacian )
y_pred_lap = np.array(y_pred_lap)
# mean squared error, according to keras losses documentation
return K.mean(K.square(y_pred_lap - y_true), axis=-1)
Alguém já fez algo parecido para o cálculo de perda?