RAG Converter na Heartland: IA interna privada sem enviar documentos

O que é o RAG Converter e por que a Heartland o usa?
RAG Converter transforma documentos em chunks e embeddings pesquisáveis por IA. A Heartland usa-o em ferramentas de IA internas para que as pessoas possam fazer perguntas aos nossos próprios ficheiros — registos agrícolas, programas de clientes, notas de compounding, trabalho de LCA — sem enviar esses ficheiros para um modelo público.
RAG significa retrieval-augmented generation: o assistente procura uma passagem do nosso corpus e responde a partir dela, em vez de adivinhar. A jogada de privacidade é onde a conversão acontece. O conversor gratuito do RAG Converter é WebAssembly no separador do browser. Os documentos são lidos pela página. Não são enviados para ragconverter.com para serem analisados.
É a mesma regra de propriedade que definimos ao retirar da cloud dados de clientes e da cadeia de abastecimento de cânhamo: seja dono dos dados que cria e não os troque por um chatbot.
Por que não colaremos ficheiros da Heartland num LLM público
O working set da Heartland não é um post de blog. Inclui contratos com produtores, conversas com clientes, notas de formulação e detalhes de rotas comerciais que não publicamos. Os nossos agricultores e parceiros fabricantes não se inscreveram para se tornarem dados de treino.
Ferramentas de chat públicas são convenientes. São também um novo caminho de saída. Assim que um PDF está na janela de contexto de outra pessoa, não controla retenção, subprocessadores, nem se uma frase aparece na resposta de outro inquilino. O Privacy Framework da NIST aponta o processamento no dispositivo local como forma de limitar observabilidade e vinculabilidade (CT.DP-P1). A conversão local é esse controlo, aplicado a RAG.
Isto é segurança além de privacidade. Uma lista de clientes vazada e um embedding vazado dessa lista são ambos incidentes. A diferença é se a primeira cópia alguma vez saiu do edifício.
Como a conversão local torna os dados mais acessíveis
Tirar da cloud é fácil de fazer mal: trancar os ficheiros numa unidade que ninguém consegue pesquisar, e tem teatro de segurança mais trabalho mais lento. O teste da Heartland é o oposto. Se um engenheiro em Detroit e um interlocutor de produtores não encontram a mesma especificação, o sistema falhou.
A saída do RAG Converter é JSONL portátil — um objeto por chunk — que carrega num vector store que operamos. Mesma estrutura para quem larga uma pasta no separador e para um script que chama a convert API. Formatos que realmente temos: PDF, Word, PowerPoint, Excel, Markdown, imagens e áudio. Páginas digitalizadas passam por OCR no dispositivo. Não há fila cloud do LibreOffice nem um “envie-nos o ficheiro por e-mail”.
Desempenho. Pronto a usar para quem já vive em pastas. Sem nova instalação de desktop para o caminho do browser. Ferramentas internas pesquisam os chunks que já produzimos.
Custo. O conversor local é gratuito e sem conta porque o trabalho corre na máquina à sua frente. Não estamos a comprar uma segunda cópia do nosso corpus a um fornecedor SaaS de RAG.
Acesso. O ponto dos embeddings é que uma pergunta pode acertar no parágrafo certo num pacote LCA de 200 páginas ou num manual de produtor sem reencaminhar o ficheiro inteiro. A LCA Imperium Farming publicada continua pública. Rascunhos, e-mails e overlays de cliente ficam connosco.
O que fica local e o que ainda colocamos no fio
Honestidade sobre a divisão:
- Conversor do browser. Os ficheiros nunca saem do computador. A página pode perguntar ao servidor quantas conversões gratuitas restam; esse pedido é um número, não o documento.
- API para programadores.
POST /v1/converté para pipelines e jobs que o separador não consegue executar — OCR em resolução completa, fala, vídeo, sem teto de tamanho de ficheiro. Esse caminho é um servidor. A Heartland trata-o como uma ferramenta que escolhemos, não como um sítio para estacionar o corpus. Converta, leve o JSONL, guarde onde já guardamos dados da Heartland. - Cloud que ainda não desligámos. Identidade, alguns sistemas de clientes e e-mail ainda vivem em fornecedores. O plano de declouding é faseado. O RAG Converter é a peça que pudemos trazer para local primeiro: o passo de conversão que antes significava “envie o PDF para um produto de IA”.
Não afirmamos que a API esteja air-gapped. Afirmamos que o hábito padrão na Heartland é conversão local, e que a IA interna responde a partir do nosso índice.
Como isto se encaixa no resto da Heartland
Este site já saiu do WordPress para um stack Rust estático por velocidade, SEO e uma superfície de ataque menor. O mesmo instinto aplica-se dentro da empresa: manter os ficheiros valiosos, torná-los pesquisáveis, não alugar essa pesquisa a um modelo que quer os originais.
Parceiros que querem a história pública — Why Imperium, Imperium Filler, Imperium Fibers — continuam a obtê-la aqui. Os ficheiros por detrás dessas páginas ficam do nosso lado do fio.
Experimente o conversor em ragconverter.com. Para como a Heartland pensa sobre dados de clientes e da cadeia de abastecimento, leia o artigo de declouding ou contacte-nos. Mais da biblioteca: notícias de sustentabilidade.

