LobeChat - Uma interface/framework de ChatGPT/LLMs de código aberto e design moderno. Suporta síntese de fala, multimodalidade e sistema de plugins extensível. Implantação **GRATUITA** com um clique do seu aplicativo de chat privado OpenAI ChatGPT/Claude/Gemini/Groq/Ollama. Recursos ### 1. Suporte a Múltiplos Provedores de Serviço de Modelos No desenvolvimento contínuo do LobeChat, entendemos profundamente a importância da diversidade nos provedores de serviço de modelos para atender às necessidades da comunidade ao fornecer serviços de conversação com IA. Portanto, expandimos nosso suporte para múltiplos provedores de serviço de modelos, em vez de nos limitarmos a um único, a fim de oferecer aos usuários uma seleção mais diversa e rica de conversas. Dessa forma, o LobeChat pode se adaptar mais flexivelmente às necessidades de diferentes usuários, enquanto também fornece aos desenvolvedores uma gama mais ampla de escolhas. #### Provedores de Serviço de Modelos Suportados Implementamos suporte para os seguintes provedores de serviço de modelos: - **AWS Bedrock**: Integrado com o serviço AWS Bedrock, suportando modelos como **Claude / LLama2**, fornecendo poderosas capacidades de processamento de linguagem natural. - **Anthropic (Claude)**: Acesso aos modelos da série **Claude** da Anthropic, incluindo Claude 3 e Claude 2, com avanços em capacidades multimodais e contexto estendido, estabelecendo um novo padrão na indústria. - **Google AI (Gemini Pro, Gemini Vision)**: Acesso aos modelos da série **Gemini** do Google, incluindo Gemini e Gemini Pro, para suportar compreensão e geração avançadas de linguagem. - **ChatGLM**: Adicionada a série de modelos **ChatGLM** da Zhipuai (GLM-4/GLM-4-vision/GLM-3-turbo), proporcionando aos usuários outra escolha eficiente de modelo de conversação. - **Moonshot AI (Dark Side of the Moon)**: Integrado com os modelos da série Moonshot, uma startup inovadora de IA da China, visando fornecer uma compreensão mais profunda da conversação. - **Groq**: Acesso aos modelos de IA da Groq, processando eficientemente sequências de mensagens e gerando respostas, capazes de diálogos de múltiplas voltas e tarefas de interação única. - **OpenRouter**: Suporta roteamento de modelos incluindo **Claude 3**, **Gemma**, **Mistral**, **Llama2** e **Cohere**, com otimização de roteamento inteligente para melhorar a eficiência de uso, aberto e flexível. - **01.AI (Yi Model)**: Integrados os modelos 01.AI, com séries de APIs apresentando velocidade de inferência rápida, que não só reduziram o tempo de processamento, mas também mantiveram excelente desempenho do modelo. ### 2. Suporte a Modelos de Linguagem de Grande Escala (LLM) Locais Para atender às necessidades específicas dos usuários, o LobeChat também suporta o uso de modelos locais baseados em Ollama, permitindo que os usuários utilizem de forma flexível seus próprios modelos ou de terceiros. ### 3. Reconhecimento Visual de Modelos O LobeChat agora suporta o modelo mais recente da OpenAI com capacidades de reconhecimento visual, uma inteligência multimodal que pode perceber visuais. Os usuários podem facilmente fazer upload ou arrastar e soltar imagens na caixa de diálogo, e o agente será capaz de reconhecer o conteúdo das imagens e engajar-se em uma conversa inteligente com base nisso, criando cenários de chat mais inteligentes e diversificados. Este recurso abre novos métodos interativos, permitindo que a comunicação transcenda o texto e inclua uma riqueza de elementos visuais. Seja compartilhando imagens no uso diário ou interpretando imagens em indústrias específicas, o agente proporciona uma experiência de conversação excepcional. ### 4. Conversação por Voz TTS & STT O LobeChat suporta tecnologias de Texto-para-Fala (TTS) e Fala-para-Texto (STT), permitindo que nosso aplicativo converta mensagens de texto em saídas de voz claras, permitindo que os usuários interajam com nosso agente de conversação como se estivessem falando com uma pessoa real. Os usuários podem escolher entre uma variedade de vozes para emparelhar com o agente. Além disso, o TTS oferece uma excelente solução para aqueles que preferem aprendizado auditivo ou desejam receber informações enquanto estão ocupados. No LobeChat, selecionamos meticulosamente uma gama de opções de voz de alta qualidade (OpenAI Audio, Microsoft Edge Speech) para atender às necessidades de usuários de diferentes regiões e contextos culturais. Os usuários podem escolher a voz que se adapta às suas preferências pessoais ou cenários específicos, resultando em uma experiência de comunicação personalizada. ### 5. Geração de Imagem a partir de Texto Com suporte para a mais recente tecnologia de geração de imagem a partir de texto, o LobeChat agora permite que os usuários invoquem ferramentas de criação de imagens diretamente dentro das conversas com o agente. Aproveitando as capacidades de ferramentas de IA como DALL-E 3, MidJourney e Pollinations, os agentes agora estão equipados para transformar suas ideias em imagens. Isso possibilita um processo criativo mais privado e imersivo, permitindo a integração perfeita da narrativa visual em seu diálogo pessoal com o agente. ### 6. Sistema de Plugins (Chamada de Função) O ecossistema de plugins do LobeChat é uma extensão importante de sua funcionalidade central, aumentando significativamente a praticidade e flexibilidade do assistente LobeChat. Utilizando plugins, os assistentes LobeChat podem obter e processar informações em tempo real, como buscar informações na web e fornecer aos usuários notícias instantâneas e relevantes. Além disso, esses plugins não se limitam à agregação de notícias, mas também podem se estender a outras funções práticas, como busca rápida de documentos, geração de imagens, obtenção de dados de várias plataformas como Bilibili, Steam, e interação com vários serviços de terceiros. ### 7. Mercado de Agentes (GPTs) No Mercado de Agentes LobeChat, os criadores podem descobrir uma comunidade vibrante e inovadora que reúne uma infinidade de agentes bem projetados, que não apenas desempenham um papel importante em cenários de trabalho, mas também oferecem grande conveniência nos processos de aprendizagem. Nosso mercado não é apenas uma plataforma de exibição, mas também um espaço colaborativo. Aqui, todos podem contribuir com sua sabedoria e compartilhar os agentes que desenvolveram. ### 8. Adaptação para Dispositivos Móveis Realizamos uma série de otimizações de design para dispositivos móveis para melhorar a experiência do usuário móvel. Atualmente, estamos iterando na experiência do usuário móvel para alcançar interações mais suaves e intuitivas. Se você tiver sugestões ou ideias, convidamos você a fornecer feedback através do GitHub Issues ou Pull Requests. ### Além disso Além desses recursos, o LobeChat também possui uma técnica básica muito melhor: - [x] **Implantação Rápida**: Usando a plataforma Vercel ou imagem docker, você pode implantar com apenas um clique e completar o processo em 1 minuto sem qualquer configuração complexa. - [x]