Recentemente, foram feitos progressos significativos no campo da inteligência artificial. Pesquisadores da UCLA e de outras instituições desenvolveram com sucesso o grande modelo de inteligência incorporada MultiPLY, que marca um passo sólido em direção à inteligência artificial geral (AGI). O MultiPLY não só possui capacidades de detecção multimodais, incluindo tato, visão e audição, mas, mais importante ainda, pode interagir com o ambiente 3D de forma mais abrangente e demonstrar capacidades poderosas em aplicações práticas. O resultado desta pesquisa e seu conjunto de dados multissensoriais em grande escala, Multisensory-Universe, fornecem recursos valiosos e novas direções para o desenvolvimento futuro da inteligência artificial.
Recentemente, investigadores da UCLA e de outras instituições lançaram o MultiPLY, um grande modelo de inteligência incorporada. Este modelo não possui apenas capacidades de percepção multimodal, incluindo toque, visão, audição, etc., permitindo que a IA interaja com o ambiente 3D de forma mais abrangente. Ao interagir com o ambiente 3D através do agente, o MultiPLY tem um bom desempenho em experimentos como recuperação de objetos, uso de ferramentas, anotação multissensorial e decomposição de tarefas. Além disso, os pesquisadores criaram um conjunto de dados multissensoriais em grande escala, Multisensory-Universe, que contém 500.000 dados. Esta pesquisa fornece novas ideias para a construção de grandes modelos com capacidades multissensoriais e fornece uma nova direção para a realização de AGI.O surgimento do MultiPLY não só prova a importância da percepção multimodal e da inteligência incorporada no desenvolvimento da inteligência artificial, mas também fornece novos caminhos técnicos e suporte de dados para a construção de sistemas de IA mais inteligentes e poderosos no futuro. Acredita-se que, com o avanço contínuo da tecnologia, grandes modelos inteligentes incorporados como o MultiPLY desempenharão um papel em mais campos e trarão maior conveniência e progresso à sociedade humana. Esperamos que mais resultados de pesquisas semelhantes surjam no futuro.