[phpBB Debug] PHP Notice: in file /viewtopic.php on line 981: date(): It is not safe to rely on the system's timezone settings. You are *required* to use the date.timezone setting or the date_default_timezone_set() function. In case you used any of those methods and you are still getting this warning, you most likely misspelled the timezone identifier. We selected the timezone 'UTC' for now, but please set date.timezone to select your timezone.
[phpBB Debug] PHP Notice: in file /viewtopic.php on line 981: getdate(): It is not safe to rely on the system's timezone settings. You are *required* to use the date.timezone setting or the date_default_timezone_set() function. In case you used any of those methods and you are still getting this warning, you most likely misspelled the timezone identifier. We selected the timezone 'UTC' for now, but please set date.timezone to select your timezone.
[phpBB Debug] PHP Notice: in file /includes/functions.php on line 4183: Cannot modify header information - headers already sent by (output started at /includes/functions.php:3493)
[phpBB Debug] PHP Notice: in file /includes/functions.php on line 4185: Cannot modify header information - headers already sent by (output started at /includes/functions.php:3493)
[phpBB Debug] PHP Notice: in file /includes/functions.php on line 4186: Cannot modify header information - headers already sent by (output started at /includes/functions.php:3493)
[phpBB Debug] PHP Notice: in file /includes/functions.php on line 4187: Cannot modify header information - headers already sent by (output started at /includes/functions.php:3493)
Chaos and Correlation • Просмотр темы - Santander Value Prediction Challenge

Santander Value Prediction Challenge

Модераторы: ТВЧ, Petrovich

Re: Santander Value Prediction Challenge

Сообщение Eugene Lutsenko » Чт авг 02, 2018 7:01 am

Пойдет. А может быть так, что твоя программа что-то делает с видеокартой, переключает ее в какой-то другой режим? Ведь до этого распознавание на модели с примерно 5000 объектов шло менее секунды, а сейчас 20 минут. Еще окошко модуля распознавания стало само немного смещаться по экрану несколько раз в секунду
Аватара пользователя
Eugene Lutsenko
 
Сообщения: 9738
Зарегистрирован: Вт мар 09, 2010 6:11 am
Откуда: Krasnodar, Russia

Re: Santander Value Prediction Challenge

Сообщение Eugene Lutsenko » Чт авг 02, 2018 7:33 am

Там в статьях есть про инт.критерии. Достоверность моделей получается разная.

Сейчас проверил распознавание на реальной обучающей выборке (около 5000 объектов). Прошло все нормально 21 минута. результаты правдоподобные, похожие на правильные. Надо выдавать результаты по двум инт.критерям. Надо бы теперь проверить их достоверность по их метрике.
Аватара пользователя
Eugene Lutsenko
 
Сообщения: 9738
Зарегистрирован: Вт мар 09, 2010 6:11 am
Откуда: Krasnodar, Russia

Re: Santander Value Prediction Challenge

Сообщение Eugene Lutsenko » Чт авг 02, 2018 9:04 am

Молодец. Когда сделают видеокарты на миллиард мегапикселей этот вопрос снимется сам собой
Аватара пользователя
Eugene Lutsenko
 
Сообщения: 9738
Зарегистрирован: Вт мар 09, 2010 6:11 am
Откуда: Krasnodar, Russia

Re: Santander Value Prediction Challenge

Сообщение Eugene Lutsenko » Чт авг 02, 2018 9:33 am

Можно поставить птичку: показывать-не показывать, а по умолчанию показывать. нечто подобное было в DOS-версии системы Эйдос. Там в виде 2d картинки отображался процесс расчета моделей и распознавания, см. рисунок 4 здесь http://lc.kubagro.ru/aidos/aidos14_L3/1.htm
Аватара пользователя
Eugene Lutsenko
 
Сообщения: 9738
Зарегистрирован: Вт мар 09, 2010 6:11 am
Откуда: Krasnodar, Russia

Re: Santander Value Prediction Challenge

Сообщение Eugene Lutsenko » Чт авг 02, 2018 10:50 am

Просто файлы результатов для Каггла вида results_inf5i.csv, results_inf5k.csv получаешь из соответствующих файлов результатов распознавания Rsp_inf5i.dbf, Rsp_inf5k.dbf и все
Аватара пользователя
Eugene Lutsenko
 
Сообщения: 9738
Зарегистрирован: Вт мар 09, 2010 6:11 am
Откуда: Krasnodar, Russia

Re: Santander Value Prediction Challenge

Сообщение Eugene Lutsenko » Чт авг 02, 2018 11:01 am

Новая программа синтеза вроде на вид работает и завершается нормально, но дает во всех матрицах все нули. В конце в сообщении про OK можно убрать. И так ясно, что OK.

Модуль распознавания на вид работает нормально, но в конце выдает ошибку:
Изображение

В тех статьях приведены формулы для обоих инт.критериев.
Могу сказать где это в исходном тексте.

На каком примере ты проверяешь?
Может быть дать ссылку на еще один?
Аватара пользователя
Eugene Lutsenko
 
Сообщения: 9738
Зарегистрирован: Вт мар 09, 2010 6:11 am
Откуда: Krasnodar, Russia

Re: Santander Value Prediction Challenge

Сообщение Eugene Lutsenko » Чт авг 02, 2018 11:09 am

Может быть это из-за того, что разные видеокарты?
Вот еще один: https://yadi.sk/d/HMm_RrPt3Zpxd6
Чтобы работало надо разместить так: c:\1\Aidos-X
Аватара пользователя
Eugene Lutsenko
 
Сообщения: 9738
Зарегистрирован: Вт мар 09, 2010 6:11 am
Откуда: Krasnodar, Russia

Re: Santander Value Prediction Challenge

Сообщение Eugene Lutsenko » Чт авг 02, 2018 11:22 am

После синтеза моделей во всех матрицах все нули. Это заняло около 3 минут.

Модуль распознавания в конце дал ту же ошибку. Процесс шел минут 5.

Мне больше понравился дизайн в модуле распознавания, где видно как и в какой модели идет распознавание и общая стадия процесса.
Аватара пользователя
Eugene Lutsenko
 
Сообщения: 9738
Зарегистрирован: Вт мар 09, 2010 6:11 am
Откуда: Krasnodar, Russia

Re: Santander Value Prediction Challenge

Сообщение Eugene Lutsenko » Чт авг 02, 2018 11:48 am

Теперь все числа в матрицах моделей на месте. Процесс создания всех моделей занял 27 секунд.

Нечаянно запустил распознавание до окончания записи матриц. Получился конфликт обращения к GPU.

Но после закрытия модуля синтеза распознавание пошло без перезагрузки модуля и дало правдоподобный результат, а в конце ту же ошибку.

Лучше чтобы цвет прогресс-бар модели, который ползет вверху, совпадал с цветом ее фрагмента в нижнем-прогресс-бар. Так будет понятнее.
Аватара пользователя
Eugene Lutsenko
 
Сообщения: 9738
Зарегистрирован: Вт мар 09, 2010 6:11 am
Откуда: Krasnodar, Russia

Re: Santander Value Prediction Challenge

Сообщение Eugene Lutsenko » Чт авг 02, 2018 12:06 pm

у меня тоже появилась эта мысль (на счет синтеза модели на ЦПУ), тем более, что на GPU у меня вообще не работает и тоже дольше.

Но результаты надо получать из соответствующих файлов.

Если теперь ты сделаешь форму по достоверности моделей (с метрикой Каггла), то можно будет получить средневзвешенный прогноз путем голосования прогнозов в разных моделях с разными инт.критериями с весами, равными достоверности моделей. И это уже посылать на Каггл.

Мы так делали с Александром Петровичем когда-то давно:
http://lc.kubagro.ru/aidos/aidos12_TL2/index.htm
http://lc.kubagro.ru/aidos/aidos12_TL2/2.htm
2.6. АЛГОРИТМ ГОЛОСОВАНИЯ МОДЕЛЕЙ (С ВЫБОРОМ ОДНОГО ИЗ 5-И АЛГОРИТМОВ)

Распознавание прошло правильно и в конце дало ту же ошибку:
Изображение
Аватара пользователя
Eugene Lutsenko
 
Сообщения: 9738
Зарегистрирован: Вт мар 09, 2010 6:11 am
Откуда: Krasnodar, Russia

Пред.След.

Вернуться в Chaos and Correlation

Кто сейчас на конференции

Сейчас этот форум просматривают: нет зарегистрированных пользователей и гости: 10

cron