Otimização de Pipeline

Заказчик: AI | Опубликовано: 06.02.2026
Бюджет: 250 $

Engenheiro de IA Sênior - Otimização de Pipeline de Longo Contexto (Python) Descrição do Projeto: Estamos buscando um especialista em IA para destravar e otimizar nosso pipeline de análise de matrículas imobiliárias. O sistema é construído em Python e utiliza o Gemini 1.5 Pro/Flash para processar documentos que podem chegar a centenas de páginas. O foco é garantir que o modelo processe o contexto integral sem truncamento e com rigor lógico. Principais Desafios e Responsabilidades: * Sanitização e Ingestão: Refinar a extração de texto (OCR/Parsing) para evitar estouro de buffers e garantir que o texto completo chegue à IA via Python/MySQL (uso de LONGTEXT). * Gestão de Tokens e Cotas: Implementar estratégias de Rate Limiting e gerenciamento de Tokens per Minute (TPM) para evitar erros 429 nas APIs do Google Cloud. * Context Window Strategy: Aplicar técnicas de estruturação (XML Tagging/Chunking) para que a IA analise cadeias dominiais complexas em documentos de 100+ páginas sem se perder. * Prompt Engineering de Alta Fidelidade: Refinar instruções de sistema para garantir que a IA mantenha a "Auditoria Sequencial" e não resuma informações críticas. Requisitos Técnicos: * Domínio de Python: Experiência com bibliotecas de manipulação de dados e integração de APIs. * Google Cloud & Vertex AI: Experiência prática em gerenciar cotas e limites no Paid Tier do Google. * Arquitetura de Dados: Conhecimento em persistência de grandes volumes de texto (MySQL/Redis) e processamento assíncrono (Celery/Workers).