Chat local com LLM

Nos últimos anos, o CRIAR desenvolve soluções capazes de executar modelos avançados de inteligência artificial diretamente em dispositivos móveis, com foco em desempenho, privacidade e praticidade. Essas soluções colocam nas mãos de qualquer pessoa um assistente inteligente que responde perguntas com base em um conjunto de informações previamente organizado, sem depender de conexão com a internet.

Para o usuário, o funcionamento é simples; por trás, existe tecnologia robusta: quando uma pergunta chega ao sistema, ele identifica automaticamente quais partes da base de conhecimento mais se relacionam ao que foi solicitado — processo conhecido como RAG (Geração Aumentada por Recuperação). Em seguida, um modelo de linguagem usa essas informações como referência e produz respostas claras, fundamentadas e fáceis de compreender.

O mesmo processo se aplica a qualquer tipo de conteúdo, como manuais técnicos, procedimentos operacionais, documentos internos, informações de negócio ou textos de referência. Assim, praticamente qualquer conjunto de informações se transforma em um assistente inteligente e especializado, que oferece suporte rápido, confiável e totalmente local, direto no dispositivo do usuário.


Imagem gerada através do DALL-E

LuxAI Chat

Conversação com RAG

LuxAI Chat é um assistente de IA local que fornece respostas sobre o smartphone Moto Razr 60 Ultra usando seu manual como base de conhecimento. Ele utiliza Geração Aumentada por Recuperação (RAG) com o modelo Qwen 2.5 1.5B para processamento de linguagem e o modelo de embeddings bge-small-en-v1.5 para busca semântica, aprimorada por reranking para melhorar a relevância das respostas. Todos os dados permanecem privados no seu dispositivo.