Otimização de Pipeline

Engenheiro de IA Sênior - Otimização de Pipeline de Longo Contexto (Python)
Descrição do Projeto:
Estamos buscando um especialista em IA para destravar e otimizar nosso pipeline de análise de matrículas imobiliárias. O sistema é construído em Python e utiliza o Gemini 1.5 Pro/Flash para processar documentos que podem chegar a centenas de páginas. O foco é garantir que o modelo processe o contexto integral sem truncamento e com rigor lógico.
Principais Desafios e Responsabilidades:
* Sanitização e Ingestão: Refinar a extração de texto (OCR/Parsing) para evitar estouro de buffers e garantir que o texto completo chegue à IA via Python/MySQL (uso de LONGTEXT).
* Gestão de Tokens e Cotas: Implementar estratégias de Rate Limiting e gerenciamento de Tokens per Minute (TPM) para evitar erros 429 nas APIs do Google Cloud.
* Context Window Strategy: Aplicar técnicas de estruturação (XML Tagging/Chunking) para que a IA analise cadeias dominiais complexas em documentos de 100+ páginas sem se perder.
* Prompt Engineering de Alta Fidelidade: Refinar instruções de sistema para garantir que a IA mantenha a "Auditoria Sequencial" e não resuma informações críticas.
Requisitos Técnicos:
* Domínio de Python: Experiência com bibliotecas de manipulação de dados e integração de APIs.
* Google Cloud & Vertex AI: Experiência prática em gerenciar cotas e limites no Paid Tier do Google.
* Arquitetura de Dados: Conhecimento em persistência de grandes volumes de texto (MySQL/Redis) e processamento assíncrono (Celery/Workers).