|
|
| (не показано 17 промежуточных версий этого же участника) |
| Строка 1: |
Строка 1: |
| − | [[Category:Task]] | + | [[Category:Реконструкция по типам событий]] |
| − | = 1 =
| + | {{mentioned|https://chispa1707.livejournal.com/3050988.html}} |
| − | [https://chispa1707.livejournal.com/3013430.html [[#число совпадений]] - функция от общего числа (белая линия) регионо-событий. Это крайне важно, поскольку хоронит ВСЕ мои предыдущие методы. То есть, именно на них тратить силы бессмысленно: результата не дадут]
| + | Автоматизация для [[Алгоритм в Excel реконструкции по типам событий]] |
| − | == число совпадений == | + | = [[совпадение типов событий в одном году]] = |
| − | [https://chispa1707.livejournal.com/3011074.html?thread=35234818#t35234818 в строках слева годы, в столбцах наверху индексы, на пересечении - числовое значение. Очищаю до единицы, - важен сам факт, что в этом году индекс есть. После этого годы не нужны. Имеет значение только то, какие индексы встречаются в одной строке. Строк много, и в итоге я подвел сумму, какой индекс с какими индексами сколько раз встретился в одной строке] за все годы! | + | == число совпадений со сдвигом == |
| | + | [https://chispa1707.livejournal.com/3010636.html есть у меня в Экселе табличка: 1-й столбец - год 2-й столбец - двухбуквенный индекс места события 3-й столбец - двухбуквенный индекс типа события ... Первая задача. Требуется выяснить, например, как часто разные события встречаются в одном и том же году году... на пересечении в ячейке - цифра, говорящая, сколько раз индекс столбца встретился в одном году с индексом строки... для тех же 879 индексов сверяем совпадения со сдвигом в год, два, три, четыре и пять. ] |
| | | | |
| − | * [https://chispa1707.livejournal.com/3011074.html https://my-files.ru/qwyi0r Данные позже 1852 года можно и удалить... установить число совпадений разных индексов год в год. Позже можно опробовать и со сдвижкой в 1-5 лет... пять вариантов: индексы типа события в разных сочетаниях с индексами места. "Штаты" - территории учтены до уровня штатов (областей), там, где они указаны. "Регионы" - территории укрупнены до регионов типа "Западная Сибирь", это тоже имеет свой смысл... рабочий файл здесь: https://my-files.ru/em9hqo]
| + | = [https://chispa1707.livejournal.com/3011074.html?thread=35245058#t35245058 алгоритм находится здесь] = |
| − | * 00 крайняя попытка 2 (Автосохраненный).xlsx: [https://chispa1707.livejournal.com/3010636.html?thread=35238220#t35238220 Исходные две колонки на листе "3 столбца". Я их чуток сократил (до 822-1852 лет) и получил таблицу на листе "Основа". Совпадения вывожу на лист 822-1852. Здесь можно сделать и со сдвижкой на любое число лет. Суммирую итог отдельно на нижней строке. Сумму транспонирую и поочередно вывожу либо на лист СВОДНАЯ, либо (если со сдвигом в год) на лист СВОДНАЯ2]
| |
| − | *: "Суммирую итог отдельно на нижней строке" значит, что за все годы!
| |
| | | | |
| − | == число совпадений со сдвигом ==
| + | {{github|it4history/reconstruction/tree/master/Excel/EventsIndexing/EventtypesByYears.cs}} |
| − | [https://chispa1707.livejournal.com/3010636.html есть у меня в Экселе табличка: 1-й столбец - год 2-й столбец - двухбуквенный индекс места события 3-й столбец - двухбуквенный индекс типа события ... Первая задача. Требуется выяснить, например, как часто разные события встречаются в одном и том же году году... на пересечении в ячейке - цифра, говорящая, сколько раз индекс столбца встретился в одном году с индексом строки... для тех же 879 индексов сверяем совпадения со сдвигом в год, два, три, четыре и пять. ]
| |
| − | == подходы ==
| |
| − | === [[it4history]] ===
| |
| − | [https://chispa1707.livejournal.com/3011074.html?thread=35245058#t35245058 алгоритм находится здесь] {{github|it4history/reconstruction/tree/master/Excel/EventsIndexing/EventtypesByYears.cs}}
| |
| | | | |
| | алгоритм нужно понимать через теорию графов | | алгоритм нужно понимать через теорию графов |
| Строка 30: |
Строка 25: |
| | c, 0, 0, 0,</pre> | | c, 0, 0, 0,</pre> |
| | | | |
| − | ==== идеи ====
| |
| − | Базовые связи брать из событий из несколькими типами событий. Базовые связи независимы от года.
| |
| − | === [[Любкин Сергей]] ===
| |
| − | [https://chispa1707.livejournal.com/3010636.html?thread=35242316#t35242316 отчёт, выводящий для каждой пары индексов: - количество годов, в которых они встречаются оба (как у Вас в первом варианте); - количество событий в этих годах, в которых есть индекс строки; - количество событий в этих годах, в которых есть индекс столбца.]
| |
| − |
| |
| − | History_02.xlsx
| |
| − |
| |
| − | [https://chispa1707.livejournal.com/3014051.html?thread=35271331#t35271331 результаты анализа в 1С. Для каждой пары "год-страна" сформировал список индексов. Результат анализа "Поиск ассоциативных правил". Сначала идёт таблица "Часто встречаемые группы". Например: пара индексов уй(евреи) и ит(репрессии) Встречается 412 раза, что составляет 1,97% от общего количества комбинаций "год-страна" (20 935). Следующая таблица в том же файле: "Ассоциативные правила". Для той же пары уй-ит в ней два правила: 1. Если в какой-то стране в каком-то году были репрессии, то с вероятностью 65% рядом встретится индекс уй(евреи)... Результат анализа "Поиск последовательностей". Ищется, какая последовательность индексов повторяется во многих странах. Например: если поставить "Максимальный интервал:2 года", то обнаружится, что в 24-х странах через год после индекса уй(евреи) встречался индекс ио (Миграции,изгнание,высылка,удалил,удаление). https://t.me/historical_statistics]
| |
| − | *https://t.me/historical_statistics
| |
| − | *:Канал создан для упорядочивания записей по загрузке в 1С и статистической обработке таблицы исторических событий, собранной и проиндексированной Андреем Степаненко.
| |
| − |
| |
| − | === [https://plus.google.com/101874328397827004168 Адольф Берг] ===
| |
| − | [https://plus.google.com/101874328397827004168 Вы вручную решаете задачи кластерного анализа. А современные методы обработки данных, включая вейвлет-анализ, нечеткие логики и т.п. позволят по-новому оценить массив данных. ]
| |
| − | === [[curiousmole]] ===
| |
| − | [https://chispa1707.livejournal.com/3011074.html?thread=35236610#t35236610 29548 строк на 873 колонки]
| |
| − |
| |
| − | [https://chispa1707.livejournal.com/3011397.html?thread=35248197#t35248197 Это называется граф. В принципе, строится и в экселе (не пробовал)... вообще, пишут, что задача кластеризации очень субъективна.]
| |
| − | === Andrew Po ===
| |
| − | некоторый файл https://chispa1707.livejournal.com/3011074.html?thread=35237122#t35237122
| |
| − |
| |
| − | = 2 =
| |
| − | процент совпадений. Например, если индекс столбца всего встречается 100 раз, а с выбранным индексом строки он встретился 14 раз, то частота совпадений именно с этим индексом - 14 %.
| |
| − | = 3 =
| |
| − | индексы, на деле, составят несколько групп с высоким процентом совпадений внутри группы и с малым процентом совпадений с индексами из других групп. Число этих групп отразит число разных этапов развития цивилизации.
| |
| | | | |
| − | = critics =
| + | [[Gephi]] |
| − | [https://chispa1707.livejournal.com/3012378.html?thread=35271706#t35271706 Задача поиска этапов развития цивилизации, мне кажется, приведёт только к версии, вещаемой традиционной историей. Потому что на вход подаются события, происшедшие в одном и том же традиционном году, без учёта фальсификаций дат. Чтобы выйти на реальные исторические этапы, нужно сначала реконструировать даты.] | |
