Понимание их подхода к разработке важно, потому что именно методологии определяют скорость инноваций, качество и безопасность таких систем.
Тема доклада: методологии разработки ПО в компании OpenAI на примере ChatGPT и других моделей.
Халин Иван Бпи258
Тема и актуальность
Что такое методология ? И зачем вообще она нужна?
Кратко об OpenAI: история и миссия
Начало OpenAI и запуск ChatGPT
Общая схема разработки в OpenAI
Agile и Scrum-принципы в OpenAI
Специализированные методологии OpenAI для ИИ
Методологии безопасности: red teaming, Preparedness Framework
Уникальность подхода OpenAI по сравнению с конкурентами
Недостатки и критика подхода OpenAI
Технические ограничения моделей: галлюцинации (уверенные, но неверные ответы), остаточные предвзятости, возможность генерации вредного контента при обходе защит.
Юридическая и этическая критика: иски по поводу использования защищённых авторским правом текстов в обучении; споры вокруг прозрачности датасетов.
Организационные конфликты: скандалы вокруг смены статуса с некоммерческого на коммерческий, конфликт с Илоном Маском и дискуссии о том, насколько компания следует своему изначальному мандату.
Внутренние риски для безопасности: за 2024 год значительная часть сотрудников, занимавшихся безопасностью AGI, покинула компанию, что породило вопросы, не ослабляется ли фокус на safety.
Операционные проблемы: периодические массовые сбои сервисов (например, проблемы со звонками или голосом в ChatGPT) показывают, что высокая скорость релизов несёт и риски стабильности.
Преимущества методологий OpenAI
Итоги
Использованные источники