Salesforce открыла революционный открытый исходный код своей мультимодальной модели искусственного интеллекта xGen-MM, мощного инструмента, который может одновременно понимать и генерировать несколько типов данных, таких как текст и изображения. Модель имеет 4 миллиарда параметров и хорошо зарекомендовала себя во многих тестах. Ее природа с открытым исходным кодом контрастирует с текущими тенденциями в отрасли и отражает стремление Salesforce продвигать открытые исследования в области искусственного интеллекта. xGen-MM уникален своей способностью обрабатывать «чередующиеся данные», что позволяет ему выполнять более сложные задачи, такие как ответы на вопросы о нескольких изображениях одновременно, с огромным потенциалом применения в таких областях, как медицинская диагностика и автономное вождение.
Salesforce запустила набор мультимодальных моделей искусственного интеллекта с открытым исходным кодом под названием xGen-MM. Этот набор моделей может одновременно понимать и генерировать несколько типов данных, таких как текст и изображения, и может полностью изменить способы исследования и применения искусственного интеллекта.
Исследовательская группа Salesforce AI опубликовала документ на arXiv, в котором подробно описывается структура xGen-MM. Эта платформа включает не только предварительно обученные модели, но также наборы данных и код тонкой настройки. Стоит отметить, что эта крупнейшая модель имеет 4 миллиарда параметров, а ее производительность показала хорошие результаты в многочисленных тестах производительности, не уступая аналогичным моделям с открытым исходным кодом.
Этот шаг с открытым исходным кодом полностью отличается от нынешней тенденции, когда многие технологические гиганты предпочитают хранить в секрете передовые модели ИИ. Salesforce заявляет, что надеется способствовать более широким исследованиям и разработкам, открывая модели и наборы данных. Фактически, это решение также должно дать большему количеству исследователей и разработчиков возможность участвовать в развитии мультимодальной технологии искусственного интеллекта.
Одним из нововведений xGen-MM является его способность обрабатывать «чередующиеся данные», то есть обрабатывать несколько изображений и текста одновременно. Эта способность позволяет модели выполнять более сложные задачи, например отвечать на вопросы о нескольких изображениях одновременно, что действительно здорово! Такие сценарии применения могут оказаться очень полезными в таких областях, как медицинская диагностика и автономное вождение.
Релиз также включает в себя несколько оптимизированных версий модели, таких как базовая предварительно обученная модель, модель, настроенная на следование инструкциям, и модель с «настройкой безопасности», предназначенная для уменьшения вредных выходных данных. Этот разнообразный выбор отражает растущее внимание сообщества ИИ к балансу между возможностями и этикой безопасности.
Однако выпуск мощных моделей также вызвал дискуссии о потенциальных рисках и социальных последствиях более совершенных систем искусственного интеллекта. Хотя Salesforce внесла изменения в безопасность для снижения рисков, вопрос о том, как сбалансировать инновации и безопасность, по-прежнему остается вопросом, над которым стоит задуматься.
Этот выпуск с открытым исходным кодом от Salesforce предоставляет исследователям ценные инструменты для лучшего понимания и улучшения этих мощных технологий. В то же время это также устанавливает новый стандарт прозрачности в области ИИ, что может подтолкнуть других технологических гигантов к большей открытости в своих исследованиях.
Вход модели: https://huggingface.co/collections/Salesforce/xgen-mm-1-models-662971d6cecbf3a7f80ecc2e
Выделять:
xGen-MM — это набор мультимодальных моделей искусственного интеллекта с открытым исходным кодом, запущенный Salesforce, который поддерживает всестороннее понимание и генерацию текста и изображений.
Модель способна обрабатывать чередующиеся данные и отвечать на вопросы о нескольких изображениях одновременно, поэтому имеет широкие перспективы применения.
? Этот выпуск включает в себя множество оптимизированных версий, уделяет внимание вопросам безопасности и этики и предоставляет исследователям богатые ресурсы.
В целом, xGen-MM с открытым исходным кодом от Salesforce представляет собой значительный прогресс в области искусственного интеллекта. Он не только предоставляет мощные инструменты, но и служит примером более открытого и ответственного направления исследований и разработок в области искусственного интеллекта. На него стоит с нетерпением смотреть. его будущие применения и разработки в различных областях.