Sonata

ООН и Google открывают статистику для ИИ на фоне низкой точности моделей

image source

ООН совместно с Google запускает систему UN System Data Commons — платформу, которая делает глобальную статистику организации доступной для ИИ-систем через запросы на естественном языке.

Новый сервис построен на открытой платформе Google Data Commons и заменяет прежний портал UNData с традиционным интерфейсом баз данных. Платформа поддерживает протокол MCP, позволяющий ИИ-системам напрямую подключаться к внешним источникам данных.

Проблема актуальна: по данным ЮНИСЕФ, тест шести крупных языковых моделей (GPT-4o, GPT-4o-mini, Claude Sonnet 4.5, Claude Haiku 4.5, Gemini 2.5 Flash и Gemini 2.0 Flash) на более чем 133 000 вопросов о показателях глобального развития показал среднюю точность лишь 21,2%.

По словам главного статистика агентства Жуана Педро Азеведо, около 60% ответов вообще не содержали пригодного для использования числа — модели часто уклонялись от прямого ответа. При повторном тестировании через два дня модели, дававшие числовой ответ оба раза, совпадали лишь в половине случаев.

Исследование является рабочим документом ЮНИСЕФ, готовящимся к публикации в журнале, и пока не прошло рецензирование.

ЮНИСЕФ также фиксирует резкий рост трафика от ИИ-ассистентов на свой сайт данных, который получает более 6 млн визитов в месяц. Переходы по ссылкам из ответов ChatGPT выросли на 67% год к году с начала января по середину сентября, составив 6,4% всех сессий. В целом ИИ-ассистенты обеспечивают примерно каждый десятый визит.

К запуску платформы присоединились 26 подразделений ООН, данные почти 20 из них уже доступны. Цель — довести до 2027 года долю статистических наборов данных системы ООН на платформе до 80%.

«Мы на порядки продвинулись в масштабе, охвате и гибкости, впервые объединив данные стольких агентств системы ООН», — отметил и.о. директора Статистического отдела ООН Шантану Мукерджи.

Google.org предоставила $2 млн на создание базовой инфраструктуры платформы. Система размещена на управляемом ООН сервере и в перспективе будет полностью обслуживаться самой организацией.

Google запустила Data Commons в 2018 году для объединения публичных наборов данных из разных источников. В прошлом году платформа получила поддержку MCP, что позволило ИИ-агентам напрямую запрашивать статистику и её источники.

Важная особенность новой платформы — отслеживание происхождения каждой цифры, что позволяет проверить, откуда ИИ-система взяла данные. В демонстрации Google ИИ-система, подключённая через MCP, собрала статистику ООН по ВИЧ-инфекциям, смертности от СПИДа и продолжительности жизни для анализа эффективности американской программы PEPFAR в Африке, создав на основе этих данных инфографику.

Однако наличие достоверных данных не гарантирует достоверность выводов ИИ. «Поскольку модели могут неверно интерпретировать нюансы, человек всегда должен проверять результаты перед публикацией», — подчеркнул руководитель команды Data Commons в Google Прем Рамасвами.

источник

Загрузка страницы