Добавить новость
smi24.net
News in English
Декабрь
2023

Погадайте мне на big data: как из больших данных проступают линии человеческих судеб

Датские ученые собрали подробные биографические сведения обо всех жителях Дании из государственных баз данных за период с 1 января 2008 года по 31 декабря 2015 года. Год рождения, здоровье, образование, зарплата, местожительство и т. д. — все было включено в анализ человеческих судеб. Авторы разработали новый способ анализа данных, похожий на системы семантического анализа языковых текстов. Их модель сумела вычленить смысловые кластеры и на их основе предсказать вероятность ранней смерти в когорте людей возрастом 35–65 лет. Уровень точности составил 40% — очень достойный показатель для попытки что-либо предсказать. Точность оказалась выше, чем у испытанных ранее моделей на базе различных нейросетей, и моделей, основанных на других принципах. Также новый анализатор неплохо справился с задачей определения личностных характеристик людей на основе всё тех же биографических данных.

В журнале Nature Computational Science опубликована статья о человеческих судьбах. В ней говорится о том, как использовать биографии для предсказания будущего отдельного человека и описать его личностные качества. Считается, что это удел гадалок, которые умеют мистическим взглядом пробить тонкую вуаль настоящего и увидеть будущее человека и самоё его суть. Но теперь на этом поприще решили себя попробовать ученые. Авторы новой методики предсказаний работали под руководством Суне Лемана (Sune Lehmann) из Копенгагенского университета и представляли различные научные учреждения Дании, а также США. В объединенную базу данных вошло всё население Дании, около 6 млн человек. Иначе говоря, ученые гадали всей стране.

В этой работе особенно интересны три аспекта. Первый — сами данные. Это собранная вместе информация о каждом датчанине: когда и где родился, где учился, где работал и когда менял работу, где жил, переезжал ли, когда и куда, сколько получал денег и за что, как их тратил, когда и зачем обращался к врачу. Хорошо, конечно, что все эти данные идут на интересную науку и, следовательно, на благо общества, но всё же от таких масштабов немножечко не по себе.

Второе, что обращает на себя внимание, — методика работы с этими данными. Сами авторы считают именно этот аспект работы наиболее значимым. В отличие от других методов анализа больших многомерных массивов здесь применены технологии анализа, разработанные специально для данных со встроенной «памятью» — тех, в которых имеются скрытые причинно-следственные связи. Собственно, жизнь человека — это набор миллиона случайных и закономерных событий, среди которых бессмысленно искать первопричину или пусковой механизм. Но с такими данными ученые уже умеют работать — это, в частности, методы распознавания смыслов в языковых текстах. Одну из таких лингвистических систем и адаптировали под свои задачи исследователи человеческих судеб. Они анализировали цепочку жизненных событий как длинную фразу. В этой фразе каждое слово-событие может быть связано по смыслу с другим словом-событием, но может быть и не связано. Программа, которую создали авторы работы (они назвали ее Life2vec, по аналогии с Word2vec), настроена на поиск этих встроенных смысловых связей. Возможно, этот общий подход для анализа систем со встроенной «памятью» может привнести новое видение и для прогнозирования других сложных систем со своей историей, например судьбы видов крупного таксона или биома.

И, наконец, третий важный аспект — это сами результаты. Разработанная программа, которая учитывает различные события прошлой жизни, может неплохо предсказать, например, раннюю смерть, а также описать личность человека. Так что получается, что личность человека увязывается с его судьбой: может быть, личность формирует судьбу, а может, и, наоборот, человек — продукт своей судьбы.

Делая прогнозы на основе своей модели, ученые отмечают, что она срабатывает лучше, чем другие прогностические системы. В целом, такой показатель, как ранняя смерть (35–65 лет) легко проконтролировать. В данном случае интервал с 2008-го по 2015 год служил как основной массив данных, а для интервала 2016–2020 гг. ученые рассчитали вероятность наступления смерти в возрастной когорте 35–65 лет. Нужно подчеркнуть, что для этой возрастной когорты прогнозы о смерти делать трудно. Однако модель life2vec предсказывает ее с вероятностью 40–42%, что на 10% превышает предсказательную точность предыдущих рекордсменов в данной области — различные варианты нейросетей.

Модель позволяет поисследовать факторы, влияющие на вероятность ранней смерти. Убирая тот или иной показатель, можно увидеть, насколько изменится прогностическая сила модели. С помощью подобного перебора ученые выяснили, что высокий доход или работа менеджером снижает риск ранней смерти, а работа машинным оператором (что бы это ни значило) или квалифицированным рабочим, а также инфекционные и душевные болезни увеличивают этот риск. Конечно, пока этот вывод не слишком оригинален — лучше быть богатым управляющим, чем больным рабочим, — но всё же предсказатель life2vec еще только учится.

На рисунке выше показано, как модель life2vec на основе всё тех же биографических записей может определить некоторые черты личности, связанные с экстраверностью-интравертностью: самооценку, общительность, готовность к коммуникации (социальная смелость), активность. Проверкой модельных оценок служили стандартные опросники, дающие оценку различным индивидуальным качествам (здесь — показателям экстраверсии). Модель неплохо справилась с определением этой черты, по крайней мере лучше, чем натренированные нейросети. Только общительность модель life2vec определила хуже нейросети.

Итак, в распоряжении ученых имеется система, которая умеет осмысленно анализировать повседневные события в жизни человека — обычную канву, без блесток успехов или прорех несчастий. Эта система, по-видимому, научилась учитывать какие-то запрятанные в клубке событий значимые узелки жизни. Мы, естественно, имеем дело с вероятностями, не слишком большими, но всё же далекими от случайностей. Эта статья научная, но в ней есть над чем поразмышлять, если вдруг потянет на философию.

Источник: Germans Savcisens, Tina Eliassi-Rad, Lars Kai Hansen, Laust Hvas Mortensen, Lau Lilleholt, Anna Rogers, Ingo Zettler, Sune Lehmann. Using sequences of life-events to predict human lives // Nature Computational Science. 2023. DOI: 10.1038/s43588-023-00573-5.

Елена Наймарк

Adblock test (Why?)








Сеть клиник «Будь Здоров» открыла первый травмпункт сети на базе клиники на Сретенке

Сеть клиник «Будь Здоров» открыла первый травмпункт сети на базе клиники на Сретенке

Модель Анастасия Решетова перенесла вирус с осложнениями

Виниры для исправления прикуса


Chat log from R20 of 2025: Richmond vs Collingwood

Kolo Muani: Juventus prepare new offer but face Man United and Chelsea threat

UFC Abu Dhabi live blog: Shara Bullet vs. Marc-Andre Barriault

Weah’s agent: One Juventus director ‘is creating problems’


Вечером в Орле сгорели два автомобиля

Летний внчер в Кимже...

Как хакеры обманывают авиацию сегодня

Дорога любви: Жасмин представляет романтичный клип на песню «Ты и я»


Quarantine Zone creator reveals 3 reasons the zombie sim went viral on TikTok

Первый трейлер Battlefield 6

Fretless — The Wrath of Riffson — музыка спасёт мир. Рецензия

Ninja Party можно предзаказать в мобильных маркетах с релизом в конце июля



Где живут и на чем ездят самые аварийные водители России?

Адвокат Гаврилова раскрыла, чего добивается семья Тиммы после его смерти

Росгвардия обеспечила безопасность празднования Дня ВМФ и футбольного матча в Москве

Optima Development: Новый сквер и фитнес-клуб


Пловец из Москвы скончался во время заплыва по Волге в Нижнем Новгороде

Команда столичного управления МЧС России готовится к участию во Всероссийских соревнованиях по пожарно-спасательному спорту

Климатолог Терешонок рассказал о глобальных изменениях климата в Москве

Лео Канделаки и Анжелика Стубайло сыграют в новую трэвел-игру «Кто куда» на ТНТ


Прошла испытания система дистанционной передачи данных для корректировки навигационных карт

Облюбовали «звезды». Историк Васькин назвал самый желаемый дом в Москве

Мастерица из Тулы возродила искусство создания будуарных кукол

В Кузбассе проходят торжества в честь празднования Крещения Руси


Боузкова одержала победу на теннисном турнире в Праге

Калина потерпела третье поражение в финале турнира WTA за свою карьеру.

Россиянка Калинская уступила канадке Фернандес в финале турнира WTA

Чемпион Универсиады по настольному теннису Сидоренко будет выступать за японский клуб


Спортсмен из Хакасии завоевал серебро Спартакиады молодёжи России по вольной борьбе

Николай Стариков: 453 года назад произошла Битва при Молодях

Вертолет, упавший в Телецкое озеро, совершал первый полет

Тяжело ходить по лестнице и мыть голову: врач рассказала о неочевидных симптомах саркопении


Музыкальные новости

«Молодежь любит так же, как мы»: Баста рассказал о смыслах своего мюзикла

Обложка песни. Обложки альбомов песен. Сделать обложку для песни.

«Тошнотворные звезды». Критик Соседов назвал троицу артистов, которых надо изгнать с телевидения

Алексей Учитель снимает фильм о композиторе Дмитрии Шостаковиче


Где живут и на чем ездят самые аварийные водители России?

Чемпионат по военно-спортивному многоборью среди росгвардейцев завершился в Грозном

Александр Михайлов (GSOC): «Безопасность IT-экосистемы — это зона нулевого доверия к подрядчикам»

Росгвардия обеспечила безопасность празднования Дня ВМФ и футбольного матча в Москве


Первый прямой рейс Москва – Пхеньян вылетел из Шереметьево

Дорога любви: Жасмин представляет романтичный клип на песню «Ты и я»

В Санкт-Петербурге обсудили внедрение ИИ в разработку и оптимальные корпоративные архитектуры

Росгвардия обеспечила безопасность празднования Дня ВМФ и футбольного матча в Москве


Курс на мечту: «Национальная Лотерея» и РОЛЬФ вручили новый автомобиль победителю розыгрыша в честь запуска «Автомобильной лотереи «РОЛЬФ»

НПС построит два велопешеходных моста через Москву-реку

Где живут и на чем ездят самые аварийные водители России?

В Кот-д'Ивуаре в результате аварии с участием автобуса и самосвала погибли 16 человек.


Путин в День ВМФ прибыл на территорию Главного Адмиралтейства в Санкт-Петербурге

«Внезапно»: Запад встревожен новым указом Путина

«Подводная лодка, демонтрированная Путину, произвела шок на Западе»

СМИ: Путин на этой неделе отправил США ominous сигнал.


Приговор экс-руководителю компании по производству вакцин против ковида был смягчен.



Ночные перекусы в отпуске: доктор Садыков о том, как они влияют на микрофлору и вес

Сеть клиник «Будь Здоров» открыла первый травмпункт сети на базе клиники на Сретенке

Вспомнить прошлое. Врач Романов объяснил появление метастазов через годы

Клиника гнатологии – лечение ВНЧС и восстановление прикуса


Кто заставил Зеленского предложить России новый раунд переговоров: В Британии показали пальцем

Зеленский настаивает: встреча с Путиным до конца августа с участием Европы

Запад ударил Зеленского по самому больному месту – кошельку: Киев показательно лишили 1,5 миллиардов помощи

Киевский режим применил все 18 пакетов санкций ЕС


Optima Development: Новый сквер и фитнес-клуб

Команда столичного управления МЧС России готовится к участию во Всероссийских соревнованиях по пожарно-спасательному спорту

Чемпионат по военно-спортивному многоборью среди росгвардейцев завершился в Грозном

Чемпионат по военно-спортивному многоборью среди росгвардейцев завершился в Грозном


«Беларусь-1»: Лукашенко дал интервью одному из американских СМИ

Лукашенко получил приглашения от стран Латинской Америки и Азии для визитов.

Лукашенко дал интервью одному из американских СМИ


Собянин: Большинство москвичей живет в пешей доступности от парков и скверов

Сергей Собянин. Главное за день

Собянин в День работника МФЦ поздравил сотрудников центров госуслуг Москвы

Сергей Собянин назвал инновационные разработки, которые внедрили в Москве


Зачем Минприроды Свердловской области планирует организовать полигон отходов на участке, где идёт поиск питьевой воды?

В Феодосии ликвидировали пожар на площади

Александр Михайлов (GSOC): «Безопасность IT-экосистемы — это зона нулевого доверия к подрядчикам»

Почему технологии ПВВК безопасны и эффективны, химия и экология воды по мнению Алексея Горшкова


Николай Стариков: 453 года назад произошла Битва при Молодях

Уважили чиновников и военнослужащих: в Госдуме рассказали об осеннем повышении зарплат

Рогов ночевал на вокзале из-за безденежья: «Это было отвратительно, унизительно»

Подросткам могут запретить кататься на питбайках по дорогам


В Архангельске представили киноальманах «Север, я люблю тебя!» по произведениям современных писателей

70 участников СВО в Архангельске показали мотивацию выше госслужащих — Цыбульский

В музее-заповеднике «Архангельское» пройдут «Jazzовые сезоны»

Путин дал указание рассмотреть проблемы онкологии в Архангельской области.


В Крыму из-за дыма от пожара столкнулись девять автомобилей

Прогноз погоды в Крыму на 27 июля

К парню с костылем подошли трое с требованием уступить. Он был готов, но заступилась бабушка по соседству

В Севастополе пройдет масштабная выставка картин Александра Дейнеки


Мэрия закупит новую технику для покоса травы в Ульяновске

Уже вовсю скупают: куда поехать зимой на отдых и как сэкономить на путевке

В Барнауле разыграли медали этапа чемпионата России по пляжному волейболу

Пересадка жира для создания идеального лица и тела: вся правда о липофилинге














СМИ24.net — правдивые новости, непрерывно 24/7 на русском языке с ежеминутным обновлением *