CopilotOne

Copiloto Um

Turbine seu aplicativo Web/React existente com um assistente de IA nativo semelhante ao Siri.

Principais recursos

• Voice To Action : execute ações com base na entrada de voz.
• Text To Action : execute ações com base na entrada de texto.
• Contexto da tela atual : gera automaticamente a incorporação da tela atual vista pelo usuário e cria embeddings que estão disponíveis para RAG durante inferências LLM. Isso torna a IA ciente da tela atual do usuário e ajuda a gerar melhores respostas.
• Interface de API de texto : transforme APIs existentes sem qualquer codificação para oferecer suporte a uma interface de linguagem natural para solicitações e respostas. Isso simplifica a faturação da API usando voz e também a integração em outros assistentes com tecnologia Copilot One.

Agentes UX habilitados para voz com suporte

1. Agente de UI : permite o recurso de viva-voz para executar tarefas e fluxos de trabalho de UI existentes.
2. Agente de navegação : auxilia os usuários a navegar para a página, seção ou configurações corretas.
3. Agente de Formulário : Auxiliar no preenchimento de formulários por preenchimento automático com base na entrada de voz ou arquivo, validações antecipadas, suporte multilíngue. Formulários mais simples podem ser completamente substituídos pelo Voice to API Action.

Esses agentes se concentram em reduzir a curva de aprendizado do usuário e capacitar a experiência do viva-voz para descoberta de conteúdo, descoberta de recursos, integração de usuários e preenchimento de formulários.

Assistentes

• Voice To Action : Ofereça experiência gratuita ao Hansd para usar seu aplicativo.

Vídeo de demonstração

Como será o futuro dos assistentes de IA?

O objetivo é criar um protocolo aberto para assistentes, agentes e ações de IA. Confira o futuro dos assistentes de IA usando este SDK.

Comece

Para obter instruções detalhadas. Leia documentos

Pré-requisitos

Antes de usar este pacote, certifique-se de ter o seguinte:

• Um aplicativo React existente

• Crie credenciais de copiloto do Sugar AI ou conta auto-hospedada

Instalar

Você pode instalar o pacote @sugar-ai/copilot-one-js via npm em seu projeto react

Instalar pacote

npm install @sugar-ai/copilot-one-js@latest

Adicione ao seu aplicativo React

No seu arquivo principal. src/App.tsx

 import { useCopilot , CopilotConfigType , CopilotProvider , VoiceAssistant } from '@sugar-ai/copilot-one-js' ;


const copilotConfig : CopilotConfigType = {
  copilotId : "<copilotId>" ,
  server : {
    endpoint : "http://play.sugarcaneai.dev/api" ,
    token : "<token>" ,
  } ,

  ai : {
    defaultPromptTemplate : "<prompt template>" ,
    defaultPromptVariables : {
      $AGENT_NAME : "Sugar" ,
    } ,
    successResponse : "Task is completed" ,
    failureResponse : "I am not able to do this"
  } ,
}

// Wrap the App with Copilot Provider

    < CopilotProvider config = { copilotConfig } >
      < TodoApp / >
    < / CopilotProvider>

Estamos tomando um exemplo de um aplicativo de tarefas. Para rastrear o contexto da tela atual do usuário usando useStateEmbedding

 const TodoApp = ( ) => {

const { useStateEmbedding , registerAction , unregisterAction } = useCopilot ( ) ; // Add

// const [todos, setTodos] = useState([]);
const [ todos , setTodos ] = useStateEmbedding ( [ ] , { scope1 : "todoApp" , scope2 : "todos" } ) ; // Switch

...

}

Cadastre funções para criar, excluir e marcar como concluído.

 const TodoApp = ( ) => {

  ...

  // Functionalies
  const addTodo = ( task ) => { ... } } ;
  const deleteTodo = ( task ) => { ... } ;
  const markTodoAsDoneById = function ( todoId : number ) { ... } ;

  // Register addTodo function
  registerAction (
    "addTodo" ,
    {
      name : "addTodo" ,
      description : "Add a new todo" ,
      parameters : [
        {
          name : "task" ,
          type : "string" ,
          description : "Task description" ,
          required : true ,
        }
      ] ,
    } ,
    addTodo ,
  ) ;

...

}

Roteiro

• SDK da Web lançado

  • Voz para ação
  • Texto para ação
  • Contexto da tela atual

• POC

  • Interface API de texto

• [] Agente de navegação

• [] Formulário Agente