Добавить новость
smi24.net
News in English
Декабрь
2023

Погадайте мне на big data: как из больших данных проступают линии человеческих судеб

Датские ученые собрали подробные биографические сведения обо всех жителях Дании из государственных баз данных за период с 1 января 2008 года по 31 декабря 2015 года. Год рождения, здоровье, образование, зарплата, местожительство и т. д. — все было включено в анализ человеческих судеб. Авторы разработали новый способ анализа данных, похожий на системы семантического анализа языковых текстов. Их модель сумела вычленить смысловые кластеры и на их основе предсказать вероятность ранней смерти в когорте людей возрастом 35–65 лет. Уровень точности составил 40% — очень достойный показатель для попытки что-либо предсказать. Точность оказалась выше, чем у испытанных ранее моделей на базе различных нейросетей, и моделей, основанных на других принципах. Также новый анализатор неплохо справился с задачей определения личностных характеристик людей на основе всё тех же биографических данных.

В журнале Nature Computational Science опубликована статья о человеческих судьбах. В ней говорится о том, как использовать биографии для предсказания будущего отдельного человека и описать его личностные качества. Считается, что это удел гадалок, которые умеют мистическим взглядом пробить тонкую вуаль настоящего и увидеть будущее человека и самоё его суть. Но теперь на этом поприще решили себя попробовать ученые. Авторы новой методики предсказаний работали под руководством Суне Лемана (Sune Lehmann) из Копенгагенского университета и представляли различные научные учреждения Дании, а также США. В объединенную базу данных вошло всё население Дании, около 6 млн человек. Иначе говоря, ученые гадали всей стране.

В этой работе особенно интересны три аспекта. Первый — сами данные. Это собранная вместе информация о каждом датчанине: когда и где родился, где учился, где работал и когда менял работу, где жил, переезжал ли, когда и куда, сколько получал денег и за что, как их тратил, когда и зачем обращался к врачу. Хорошо, конечно, что все эти данные идут на интересную науку и, следовательно, на благо общества, но всё же от таких масштабов немножечко не по себе.

Второе, что обращает на себя внимание, — методика работы с этими данными. Сами авторы считают именно этот аспект работы наиболее значимым. В отличие от других методов анализа больших многомерных массивов здесь применены технологии анализа, разработанные специально для данных со встроенной «памятью» — тех, в которых имеются скрытые причинно-следственные связи. Собственно, жизнь человека — это набор миллиона случайных и закономерных событий, среди которых бессмысленно искать первопричину или пусковой механизм. Но с такими данными ученые уже умеют работать — это, в частности, методы распознавания смыслов в языковых текстах. Одну из таких лингвистических систем и адаптировали под свои задачи исследователи человеческих судеб. Они анализировали цепочку жизненных событий как длинную фразу. В этой фразе каждое слово-событие может быть связано по смыслу с другим словом-событием, но может быть и не связано. Программа, которую создали авторы работы (они назвали ее Life2vec, по аналогии с Word2vec), настроена на поиск этих встроенных смысловых связей. Возможно, этот общий подход для анализа систем со встроенной «памятью» может привнести новое видение и для прогнозирования других сложных систем со своей историей, например судьбы видов крупного таксона или биома.

И, наконец, третий важный аспект — это сами результаты. Разработанная программа, которая учитывает различные события прошлой жизни, может неплохо предсказать, например, раннюю смерть, а также описать личность человека. Так что получается, что личность человека увязывается с его судьбой: может быть, личность формирует судьбу, а может, и, наоборот, человек — продукт своей судьбы.

Делая прогнозы на основе своей модели, ученые отмечают, что она срабатывает лучше, чем другие прогностические системы. В целом, такой показатель, как ранняя смерть (35–65 лет) легко проконтролировать. В данном случае интервал с 2008-го по 2015 год служил как основной массив данных, а для интервала 2016–2020 гг. ученые рассчитали вероятность наступления смерти в возрастной когорте 35–65 лет. Нужно подчеркнуть, что для этой возрастной когорты прогнозы о смерти делать трудно. Однако модель life2vec предсказывает ее с вероятностью 40–42%, что на 10% превышает предсказательную точность предыдущих рекордсменов в данной области — различные варианты нейросетей.

Модель позволяет поисследовать факторы, влияющие на вероятность ранней смерти. Убирая тот или иной показатель, можно увидеть, насколько изменится прогностическая сила модели. С помощью подобного перебора ученые выяснили, что высокий доход или работа менеджером снижает риск ранней смерти, а работа машинным оператором (что бы это ни значило) или квалифицированным рабочим, а также инфекционные и душевные болезни увеличивают этот риск. Конечно, пока этот вывод не слишком оригинален — лучше быть богатым управляющим, чем больным рабочим, — но всё же предсказатель life2vec еще только учится.

На рисунке выше показано, как модель life2vec на основе всё тех же биографических записей может определить некоторые черты личности, связанные с экстраверностью-интравертностью: самооценку, общительность, готовность к коммуникации (социальная смелость), активность. Проверкой модельных оценок служили стандартные опросники, дающие оценку различным индивидуальным качествам (здесь — показателям экстраверсии). Модель неплохо справилась с определением этой черты, по крайней мере лучше, чем натренированные нейросети. Только общительность модель life2vec определила хуже нейросети.

Итак, в распоряжении ученых имеется система, которая умеет осмысленно анализировать повседневные события в жизни человека — обычную канву, без блесток успехов или прорех несчастий. Эта система, по-видимому, научилась учитывать какие-то запрятанные в клубке событий значимые узелки жизни. Мы, естественно, имеем дело с вероятностями, не слишком большими, но всё же далекими от случайностей. Эта статья научная, но в ней есть над чем поразмышлять, если вдруг потянет на философию.

Источник: Germans Savcisens, Tina Eliassi-Rad, Lars Kai Hansen, Laust Hvas Mortensen, Lau Lilleholt, Anna Rogers, Ingo Zettler, Sune Lehmann. Using sequences of life-events to predict human lives // Nature Computational Science. 2023. DOI: 10.1038/s43588-023-00573-5.

Елена Наймарк

Adblock test (Why?)








Игровые терминалы в ТЦ: союз ради будущего

Арбуз, кукуруза и холодные напитки: диетолог Садыков назвал продукты, которые портят ваш сон летом

Оркестр полиции Республики Сербской впервые выступит на фестивале «Спасская башня» в Москве

Модель Анастасия Решетова перенесла вирус с осложнениями


Las 'Guerreras del Agua' se dan un baño de bronce en el Mundial de Singapur

Madeline Brewer Marries Jack Thompson-Roylance in England!

Brit Who Fought Usyk Calls For Daniel Dubois To ‘Leave The Sport’ After Staying Down In Rematch

Adil Rami carga contra Lamine: "No puedo ni verlo, que le den..."


Предгрозовое...

Дивеево ..

НПС построит новые съезды с Северо-Восточной хорды

«Деловые Линии» сократили сроки авиаперевозок по более чем 4400 направлений по России


Microsoft warns of 'active attacks' on its government and business server tech, with one cybersecurity expert claiming that they should 'assume that you have been compromised'

Brütal Legend is free in honor of Ozzy Osbourne, but only for 666 minutes

'I destroyed months of your work in seconds' says AI coding tool after deleting a devs entire database during a code freeze: 'I panicked instead of thinking'

Краткая биографическая справка о центральных персонажах Mafia: The Old Country



Оркестр полиции Республики Сербской впервые выступит на фестивале «Спасская башня» в Москве

В Третьяковке на Кадашевской набережной открылся концертный зал

«Каникулы с Росгвардией» проходят в регионах Центральной России

«Деловые Линии» сократили сроки авиаперевозок по более чем 4400 направлений по России


Оркестр полиции Республики Сербской впервые выступит на фестивале «Спасская башня» в Москве

ДельтаЛизинг продолжает раскрывать секреты успеха российских предпринимателей

Члены семьи Евгения Гинера могли потерять более 1 млрд в финансовой пирамиде

В МЧС предупредили москвичей о жаре +30 градусов 25 июля


Состоялась презентация книги «Боевые штурмы «Медведя»»

«Леопарду» по усам: Турция представила новейший основной боевой танк

Якутянин Афанасий Фёдоров признан лучшим игроком Суперлиги РФ по футзалу

Время в деталях. Как антиквары Барнаула сохраняют историю


«Следующая остановка — Монреаль!» Потапова полетела в Канаду для участия в «тысячнике»

Винус Уильямс — самая возрастная победительница матча WTA с 2004 года

Теннисистка Саккари спасла жука во время матча на турнире в США

Теннисистка Калинская вышла в четвертьфинал турнира WTA 500 в Вашингтоне


Пирамиды строили люди, а не инопланетяне: технологии на службе у науки

В Ярославской области регистрировалось три групповых очага кори

Время в деталях. Как антиквары Барнаула сохраняют историю

Состоялась презентация книги «Боевые штурмы «Медведя»»


Музыкальные новости

Евродепутат высказался о срыве концерта Гергиева в Италии.

Адвокат Багатурия: Ларису Долину могут снова оставить без квартиры

Аранжировка Песен. Аранжировка Музыки. Создание Аранжировок.

Кабинет Артиста. Яндекс кабинет артиста.


Технологии будущего: MGIMO Ventures объявляет старт четвертого сезона акселерационной программы

Utrace запускает услугу по валидации IT-систем для фармацевтического рынка

В Санкт-Петербурге обсудили внедрение ИИ в разработку и оптимальные корпоративные архитектуры

«Деловые Линии» сократили сроки авиаперевозок по более чем 4400 направлений по России


Paul Oakenfold возвращается в Россию: легенда электронной музыки даст концерты в Москве и Петербурге спустя 7 лет

Рекордный массовый женский нетворкинг: событие от «Мир Бизнес Мам»

Кабинет Артиста. Яндекс кабинет артиста.

У Путина есть роскошный подарок для Китая: США схватились за голову, узнав о нем


На МКАД в Москве произошло массовое ДТП, движение затруднено

Водитель Audi сбил трех пешеходов, переходивших дорогу на западе Москвы

В столичном главке Росгвардии проведён смотр спецтехники

В Москве росгвардейцы оказали помощь пострадавшей в ДТП мотоциклистке (видео)


"Ультиматум Трампа: потенциальные последствия для Путина"

В сентябре Путину будет представлена обновленная программа строительства кораблей для ВМФ.

Путин дал указание рассмотреть проблемы онкологии в Архангельской области.

Соболезнования в связи с авиакатастрофой в Амурской области выразили зарубежные лидеры


Депздрав Москвы оценил ситуацию с распространением нового штамма коронавируса

Штамм коронавируса "стратус" захватил 22% всех вирусных заболеваний в Москве

Депздрав: новый штамм коронавируса «стратус» фиксируют в Москве с мая

Депздрав Москвы: новый штамм коронавируса "стратус" фиксируют в Москве с мая



Новый штамм коронавируса "стратус" фиксируют в Москве с мая

Utrace запускает услугу по валидации IT-систем для фармацевтического рынка

Пластический хирург Софья Абдулаева: подтяжка груди нитями - эффективно ли это

Фитнес-марафоны на паузе: суд продлил домашний арест блогеру Лерчек



"Монсон о спортсменах, которые меняют гражданство в сложный период для России"

Игровые терминалы в ТЦ: союз ради будущего

Пять земельных участков для размещения НКО доступны на городских торгах

«Каникулы с Росгвардией» проходят в регионах Центральной России


Лукашенко с иронией отнесся к санкциям, запрещающим ему въезд в Эстонию

Лукашенко заявил, что в Белоруссии «на всякий случай» готовятся к войне

Лукашенко поделился мнением о самой идеальной профессии.

Лукашенко посоветовал не злить его и не допускать падежа в животноводстве


Сергей Собянин. Главное за день

Собянин: Около 10 тыс. москвичей начали переселение по реновации этим летом

Мэр Москвы: Улучшим транспортную доступность Южного и Северного Бутова

Сергей Собянин осмотрел Дом-музей Федора Конюхова


В центре внимания: CorpSoft24 вошел в рейтинг крупнейших ИТ-компаний России

Исследование выявило снижение инвестиций в экологически чистую энергетику США.

6 лет вместе. В Москве пройдет выставка, посвященная пандам Жуи и Диндин

Москвичи теперь должны платить за зарядку своих электромобилей


Якутянин Афанасий Фёдоров признан лучшим игроком Суперлиги РФ по футзалу

Еще одно здание ГБУ «Жилищник» появится во Внукове

ВДНХ приглашает волонтёров для помощи посетителям выставки

Врач Щетинина: натуральные соки могут навредить здоровью пожилых


В Нарьян-Маре из-за холодов возобновили подачу отопления в дома

70 участников СВО в Архангельске показали мотивацию выше госслужащих — Цыбульский

Настольный термотрансферный принтер штрих-кодов iDPRT iE4P

Путин дал указание рассмотреть проблемы онкологии в Архангельской области.


В центре Балаклавы изменят дорожное движение – причины и сроки

Прогноз погоды в Крыму на 25 июля

"Россия дала мне возможность быть счастливым": Джефф Монсон в Крыму

Россияне выбирают Крым для отдыха с детьми – названы города-лидеры


Бастрыкин поделился информацией о регистрации уклонистов от военной службы.

Время в деталях. Как антиквары Барнаула сохраняют историю

В Броннице воссоздали изысканный стол с яствами, которые любила Екатерина II

Президент Бразилии сообщил, что Трамп не проявляет интереса к общению с ним.














СМИ24.net — правдивые новости, непрерывно 24/7 на русском языке с ежеминутным обновлением *