Chaos and Correlation

теперь о каждом слове, которое использовалось в описании биографий более чем 20000 респондентов известны астропараметры респондентов, связанные с этим словом

Евгений Вениаминович, а можно выложить файлы
Attributes
Events_ko

Хотелось бы посмотреть, попыталась скачать, мой комп сообщил, что скачивание будет продолжаться 2 часа.

Eugene Lutsenko писал(а):1. Чтобы когда вставляешь текст в Code, то он писался шрифтом Courier New.
2. Чтобы можно было вставлять картинки (и другие файлы) на форум, а не ссылки на них.

Код: Выделить всё

n = 4;
coord = {t, x, y, z};
metric = {{1, 0, 0, 0}, {0, -u[x + y + z], 0, 0}, {0,
   0, -u[x + y + z], 0}, {0, 0, 0, -u[x + y + z]}}

1. А какой здесь шрифт используется?

2. Картинки не загружаются. Раньше у нас это было, потом вирусы все скушали. Придется использать чужие серверы.

Natalia писал(а):Евгений Вениаминович, а можно выложить файлы
Attributes
Events_ko

Хотелось бы посмотреть, попыталась скачать, мой комп сообщил, что скачивание будет продолжаться 2 часа.

Все же если возможно лучше скачать, т.к. там модели, которые долго создавались.
Эти файлы здесь: http://j90540lw.beget.tech/AidosAstraX/Files.rar

Petrovich писал(а):

Eugene Lutsenko писал(а):1. Чтобы когда вставляешь текст в Code, то он писался шрифтом Courier New.
2. Чтобы можно было вставлять картинки (и другие файлы) на форум, а не ссылки на них.

Код: Выделить всё

n = 4;
coord = {t, x, y, z};
metric = {{1, 0, 0, 0}, {0, -u[x + y + z], 0, 0}, {0,
   0, -u[x + y + z], 0}, {0, 0, 0, -u[x + y + z]}}

1. А какой здесь шрифт используется?

2. Картинки не загружаются. Раньше у нас это было, потом вирусы все скушали. Придется использать чужие серверы.

Да вроде шрифт тот самый, что надо

Скачала, получилось не так уж и долго. Евгений Вениаминович, поясните, плз, какую цель Вы ставили в этом исследовании?

Александр Петрович, а Ваше мнение можете высказать?

Я подумал, что если биографии людей связаны с астропрамаетрами, то может быть и слова, используемые при описании биографий людей, как-то связаны с астропараметрами этих людей. Так и возникла мысль использовать слова в качестве классов.

В новой версии системы Эйдос это возможно. Использование слов и даже символов как значений градаций классификационных и описательных шкал было возможно и раньше и называлось: «Специальная интерпретация текстовых полей». Но такая спец. интерпретация была возможна только одновременно для классификационных и описательных шкал. А теперь (в новой версии системы Эйдос) я сделал это возможным, например, для классификационных шкал одновременно с использованием числовых описательных шкал.

При этом важно отметить, что для того, чтобы слова извлекались из исходной базы данных (из поля «Биография») используется стандартный режим системы Эйдос (интерфейс 2.3.2.2).

В данном случае в качестве классов используются уникальные слова. Но и их оказалось более 40000, т.е. это более 40000 классов. В DOS-версии системы Эйдос классов было не более 4000. И в новой версии я впервые решаю задачу с таким большим числом классов (хотя я испытывал некоторые режимы системы, но не все, на моделях со 100000 классов и 100000 признаков). Так что задачи такой размерности ранее вообще не решались. Поэтому вместе с Шашиным мы выделили менее 4000 наиболее часто встречающихся классов и с ним работали. Это была почти ручная довольно трудоемкая работа. Теперь это полностью автоматизировано в самой системе.

Конечно, видно, что в работе есть недостатки. Например, есть классы, состоящие из чисел, одной, двух, трех букв, слов с кавычками и т.п. Их бы можно было сразу отсеять еще на этапе формирования справочника классов. Кроем того в системе сейчас есть возможность лемматизации, которая позволяет автоматически заменить производные словоформы исходной словоформой (леммой). Но базы лемматизации для английского языка у меня нет (не пытался найти), а вручную ее формировать – это тоже работа, хотя в системе это и сделано удобно (можно сделать еще удобнее, если будет нужно). Потом можно удалить из исходных данных слова, которые встречаются реже заданного числа раз или по которым низкая достоверность распознавания. И т.д.

Я Вас поняла, спасибо!
Здорово, конечно, было бы использовать автоматический ввод и разбиение на классы по словам, но тогда база должна быть чистой, без мусора. Я пока отставила свою базу, это действительно трудоемкая ручная работа, тяжело только ею и заниматься.

Интересно, а как следует называть последовательность однотипных событий?

Petrovich писал(а):Интересно, а как следует называть последовательность однотипных событий?

Это что, камушек в мой огород?

Natalia писал(а):Я Вас поняла, спасибо!
Здорово, конечно, было бы использовать автоматический ввод и разбиение на классы по словам, но тогда база должна быть чистой, без мусора. Я пока отставила свою базу, это действительно трудоемкая ручная работа, тяжело только ею и заниматься.

Я решила пока не заниматься ручной чисткой мусора в базе, а довести до ума уже готовую часть (на что тоже нужно какое-то время), и попытаться сделать модель с тем числом респондентов, что уже есть. Буду искать корреляцию, с учетом того, что предполагаю, что понимаю, какая именно модель нужна, и, если результаты будут положительными, вернусь снова к разгребанию мусора.