ИИ проверил почти 4 000 медицинских статей: о публикации кода сообщила лишь каждая восьмая
Материал подготовлен Sintelligent с помощью ИИ. Опубликовано в SI: . Обновлено: .
Заявленная политика журнала сама по себе не гарантирует доступность кода: доля публикаций с кодом варьируется от нуля до более 70%.
Исследователи из MIT и Dana-Farber применили большие языковые модели, чтобы оценить, как в клинических прогностических моделях публикуется код. Алгоритмы отобрали заявления о доступности кода из почти 4 000 статей открытой коллекции PubMed Central. Затем исследователи прошли по сотням связанных репозиториев, оценивая документацию, зависимости и условия переиспользования. Лишь примерно каждое восьмое исследование сообщало о публикации кода. По журналам доля варьировалась от нуля до более 70%, причём низкие показатели встречались и у изданий с формальной политикой раскрытия. Результаты опубликованы в Nature Medicine и используются при разработке рекомендаций TRIPOD-Code. Качество автоматической разметки проверяли люди: два исследователя независимо проверили 500 статей и отдельную выборку репозиториев. Согласие было выше для конкретных признаков (например, наличия лицензии), чем для оценок достаточности документации. Позиция журналов с формальной политикой раскрытия кода в проверенных источниках не найдена.
Источники 1