Chaos and Correlation

Petrovich писал(а):Какую тему выбрать? Этот конкурс https://www.kaggle.com/c/home-credit-default-risk заканчивается через 4 дня.

Едва ли за 4 дня мы успеем решить задачу, тем более на требуемом уровне качества. Правда я еще не смотрел исходные данные. Посмотрел исходные данные. Они довольно специфические. Там довольно много связанных баз данных. Чтобы все их учесть надо писать программу, которая конвертирует эти данные в форму, пригодную для ввода в систему и обработки. Если взять только тренировочный и тестовый файлы, а остальное проигнорировать, то тогда еще можно попробовать. Но это снизит достоверность. Обучающая выборка 307511 примеров. Правда тестовая поменьше, всего 48744, но тоже прилично. Всего 121 шкала, это легко вписывается в возможности даже не мультитабличной системы Эйдос. Данные надо преобразовывать. В числовых шкалах есть пробелы. Разделитель в числах - точка, логические величины выражены числовыми значениями 0 и 1, и т.д. мы когда-то с соискателем решали такую задачу: http://ej.kubagro.ru/2007/06/pdf/16.pdf

Александр Петрович!

Утром пришлю результаты в той же форме, что в предыдущей задаче.
А в какой форме надо их присылать?

Синтез модели закончился:


А вот распознавание тестовой выборки не началось:


Это на всех вариантах модуля распознавания.

Дима!

Еще я понял что не так в формировании txt-матриц моделей: ты просто берешь размер поля NAME_ATR базы Attributes.dbf, а надо брать максимальный размер наименования из этого поля без пробелов.

Так я уже решаю эту задачу. Если исправишь модуль распознавания, то мы и по ней пошлем результат.
Задачу сейчас выложу в облако и пришлю на почту ссылку.
Я потому и использую txt-файлы, что они могут быть больше 2Гб, а dbf - не могут. Но в данном случае они не больше 2 Гб.

Дмитрий Бандык писал(а):Давайте ссылку на модель. До вечера постараюсь исправить ошибку.

Ссылку послал на почту.

Возможно модуль распознавания не работает, т.к. распознаваемая выборка некорректна. Я сейчас это заметил и исправляю

Дима!

Корректная модель будет в облаке завтра утром по той же ссылке

Eugene Lutsenko писал(а):Александр Петрович!

Утром пришлю результаты в той же форме, что в предыдущей задаче.
А в какой форме надо их присылать?

Там есть образец sample_submission.csv

В этом примере target почему-то с десятыми знаками после точки, а в тренировочной выборке target либо 1, либо 0.

Eugene Lutsenko писал(а):В этом примере target почему-то с десятыми знаками после точки, а в тренировочной выборке target либо 1, либо 0.

Как просят, так и надо делать. У них там свои мыши в голове.

Дмитрий Бандык писал(а):

Eugene Lutsenko писал(а):Дима!

Корректная модель будет в облаке завтра утром по той же ссылке

Буду смотреть.

позже 12-00