Я просто немного интересовался алгоритмами машинного обучения. И в курсе. что там можно "переучить" алгоритм, когда он заучит неправильный признак. И сделать что-то с этим очень сложно, обычно просто исправляют выборку и обучают заново. Причиной может быть, например, слишком мало кол-во "неправильных" примеров в обучающей выборке.
И тут, как мне кажется, именно это и произошло. Алгоритм заучил только верхнюю часть знака, а потому все дальнейшее обучение будет идти в неправильную сторону. Я предположил. что вы имеете отношение к создателям конкурса, и я могу через вас донести эту мысль до них. Хотя я так же могу чего-то не понимать, я профан.