OpenAI запускает программу по разработке новых тестов искусственного интеллекта
В условиях стремительного развития технологий искусственного интеллекта в различных отраслях понимание и повышение эффективности искусственного интеллекта в реальных условиях имеет решающее значение.
«Создание оценок, специфичных для какой- либо предметной области, — один из способов лучше отразить реальные варианты использования, помогая командам оценивать производительность модели в практических, высокорисковых средах», - сообщила компания OpenAI.
Многие широко используемые тесты и бенчмарки искусственного интеллекта в настоящее время сталкиваются с трудностями. Например, некоторые тесты чрезмерно сосредоточены на сложных и узкоспециализированных задачах, что затрудняет выявление истинных различий между моделями ИИ. Кроме того, некоторые тесты могут быть изменены или не соответствовать предпочтениям большинства пользователей. Эти проблемы подчеркивают настоятельную необходимость в пересмотре систем оценки ИИ.
В рамках программы Pioneers для разработки индивидуальных бенчмарков компания OpenAI планирует сотрудничать с различными отраслями, в частности, с юридическими, финансовыми, медицинскими и бухгалтерскими секторами. OpenAI указывает, что эти бенчмарки будут разработаны в ближайшие месяцы совместно с несколькими компаниями и в конечном итоге станут общедоступными, что обеспечит результаты оценки, специфичные для отрасли.
«Первая группа будет сосредоточена на стартапах, которые помогут заложить основы программы OpenAI Pioneers», - сообщила OpenAI в своем блоге. «Мы отбираем несколько стартапов для этой начальной группы, каждый из которых работает над полезными прикладными проектами, в которых искусственный интеллект может оказать влияние на реальный мир».
Первоначальными участниками программы Pioneers стали стартапы со значительным потенциалом в высокоценных и широко применимых вариантах использования. OpenAI надеется заложить основу программы Pioneers посредством сотрудничества с такими стартапами. Они получат возможность работать с командой OpenAI, используя методы тонкой настройки подкрепления для улучшения производительности моделей и повышения эффективности своих приложений в определенных областях.
Однако программа Pioneers также сталкивается с трудностями, особенно в отношении того, примет ли сообщество тесты искусственного интеллекта, разработанные при финансовой поддержке OpenAI. Это серьезная проблема, поскольку OpenAI в прошлом финансировала и другие бенчмарк-проекты, и это сотрудничество с клиентами для выпуска тестов ИИ может вызвать этические проблемы.
