Технологииai
Hugging Face предупреждает обложностях оценки систем ИИ
На конференции TechCrunch Disrupt директор по правовым и регулирующим вопросам компании Hugging Face Ирен Солайман заявила, что внедрение сторонних оценщиков в лаборатории ИИ не станет простым решением. Хотя разработчики активно продвигают тесты производительности и безопасности, существующие методики оценки еще далеки от стандартизации. Солайман подчеркнула, что доверие к метрикам невозможно без воспроизводимости результатов, для чего необходим открытый доступ к весам моделей. Кроме того, с развитием автономных агентов тестирование должно охватывать не только сам базовый алгоритм, но и всю окружающую программную инфраструктуру.