Claude Opus 4.7
Anthropic
Anthropic's April 2026 flagship. 87.6% on SWE-bench Verified, 3x higher image resolution, output self-verification, vision + reasoning.
reasoningagenticvision
US$ 6,00/1M entrada
US$ 30,00/1M saída
Modelos que leem imagens, documentos ou vídeo juntamente com texto.
Seleções rápidas
38 modelos
Anthropic
Anthropic's April 2026 flagship. 87.6% on SWE-bench Verified, 3x higher image resolution, output self-verification, vision + reasoning.
reasoningagenticvision
US$ 6,00/1M entrada
US$ 30,00/1M saída
Anthropic
Anthropic's balanced mid-tier model from February 2026. Best price/performance for production workloads: 5x cheaper than Opus, near-flagship quality.
balancedproductionagentic
US$ 3,60/1M entrada
US$ 18,00/1M saída
Google DeepMind
Google's April 2026 fast multimodal model. Combines Gemini 3 Pro's reasoning with Flash-tier latency and price. Default model in the Gemini app.
balancedmultimodallow-latency
US$ 0,60/1M entrada
US$ 3,60/1M saída
Google DeepMind
Google DeepMind's February 2026 flagship. 1M-token (1,048,576) context, native multimodal (text/image/audio/video), Deep Think reasoning.
multimodaldeep-thinklong-context
US$ 2,40/1M entrada
US$ 14,40/1M saída
OpenAI
OpenAI's unified flagship combining GPT and o-series reasoning into one model. 1M context, multimodal, top SWE-Bench Pro and OSWorld scores.
reasoningagenticvision
US$ 3,00/1M entrada
US$ 18,00/1M saída
OpenAI
OpenAI's efficient mid-tier model. 2x faster than its predecessor, 400k context, approaches GPT-5.4 quality on SWE-Bench Pro at a fraction of the cost.
balancedcost-efficientvision
US$ 0,90/1M entrada
US$ 5,40/1M saída
Salesforce
Salesforce BLIP. Vision-language model for image captioning and visual question answering. Given an image it writes a short natural-language caption, or answers a question about the image when one is supplied. A widely used baseline for automatic captioning.
blipcaptioningvqa
≈ US$ 0,00030/execução
Community
pharmapsychotic's CLIP Interrogator. Takes an image and produces a Stable-Diffusion-style text prompt by combining BLIP captioning with CLIP to rank likely subjects, artists, mediums and styles. Commonly used to reverse-engineer a prompt from an existing picture.
clip-interrogatorcaptioningtagging
≈ US$ 0,0457/execução
Community
Monocular depth-estimation model trained on 595k labeled and 62M unlabeled images. Strong zero-shot generalization in indoor and outdoor scenes.
depthvision-understandingopen-weights
≈ US$ 0,0050/execução
Meta Segment Anything 2. Promptable segmentation across images and video with temporal memory. Zero-shot, point/box/mask prompts, fast on a single H100.
segmentationvision-understandingopen-weights
≈ US$ 0,018/execução
Anthropic
Anthropic's fastest and cheapest 4.x model. Strong vision and tool use at ultra-low latency, ideal for high-concurrency workloads.
cost-efficientlow-latencyvision
US$ 1,20/1M entrada
US$ 6,00/1M saída
OpenAI
OpenAI's smallest and cheapest GPT-5.4 variant. Built for high-volume classification, extraction and coding subagents at edge-grade latency.
cost-efficientlow-latencyvision
US$ 0,24/1M entrada
US$ 1,50/1M saída
Community
Tsinghua CogVLM2 19B with Llama-3 8B base plus 11B vision expert. Strong document understanding and visual reasoning, 8k context.
multimodalvision-understandingtsinghua
≈ US$ 0,0114/execução
DeepSeek
DeepSeek-VL 7B chat model. Vision-language model with hybrid vision encoder and strong real-world visual question answering performance.
multimodalvision-understandingopen-weights
≈ US$ 0,0086/execução
Community
Naver CLOVA Donut OCR-free document-understanding transformer. End-to-end JSON extraction from forms, receipts and invoices without explicit OCR.
ocrvision-understandingnaver
≈ US$ 0,0648/execução
Community
Rednote Hilab Dots OCR. End-to-end document parsing model with layout, text and reading-order prediction in one transformer.
ocrvision-understandingopen-source
≈ US$ 0,0132/execução
Community
JaidedAI EasyOCR. Simple Python OCR wrapper supporting 80+ languages with deep-learning text detection and recognition.
ocrvision-understandingmultilingual
≈ US$ 0,0014/execução
Community
Microsoft Florence-2 Large. Unified prompt-based vision foundation model for captioning, detection, segmentation and OCR with a single 770M-param backbone.
multimodalvision-understandingmicrosoft
≈ US$ 0,0012/execução
Community
Global-Local Path Networks depth-estimation model. Combines hierarchical transformer encoder with selective feature fusion for sharp boundaries.
depthvision-understandingopen-source
≈ US$ 0,0094/execução
Community
StepFun GOT-OCR 2.0. Unified end-to-end OCR-2.0 model handling text, formulas, charts, sheet music and geometric shapes in one architecture.
ocrvision-understandingstepfun
≈ US$ 0,0012/execução
Community
Grounding DINO plus SAM. Open-vocabulary text-prompted detection and segmentation in one pipeline for fully-automatic mask generation.
segmentationvision-understandingopen-vocabulary
≈ US$ 0,0015/execução
Community
Hugging Face Idefics3 8B. Llama-3 based open-source vision-language model with strong document QA and chart-understanding performance.
multimodalvision-understandingopen-weights
≈ US$ 0,0012/execução
Community
Meta Llama 3.2 11B Vision served via Ollama on Replicate. Open-weights multimodal model for image captioning, document and chart reading, and visual question answering.
metallamavision-understanding
≈ US$ 0,0039/execução
Community
Meta Llama 3.2 90B Vision. Largest open-weights Llama vision model. Strong visual reasoning, chart, OCR and document understanding.
multimodalvision-understandingmeta
≈ US$ 0,0070/execução
Community
LLaVA 1.6 (LLaVA-NeXT) with a Vicuna-13B language backbone. Open vision-language chat model that describes images, answers questions, reads charts and reasons about scenes. Version 1.6 adds higher input resolution and better OCR and reasoning than LLaVA 1.5.
llavacaptioningvqa
≈ US$ 0,1021/execução
Community
Lotus generative depth model. Treats depth as a generation task using a diffusion model, producing higher-fidelity depth on textured surfaces.
depthvision-understandingdiffusion
≈ US$ 0,0408/execução
Community
ETH Zurich Marigold. Diffusion-based monocular depth-estimation model fine-tuned from Stable Diffusion with strong fine-detail recovery.
depthvision-understandingdiffusion
≈ US$ 0,0936/execução
Meta
Meta Mask2Former universal image-segmentation transformer. Single architecture for panoptic, instance and semantic segmentation tasks.
segmentationvision-understandingtransformer
≈ US$ 0,0276/execução
Community
Intel MiDaS v3.1 relative depth-estimation model. Robust zero-shot single-image depth across diverse domains and resolutions.
depthvision-understandingintel
≈ US$ 0,00030/execução
Community
OpenBMB MiniCPM-V 2.6. 8B vision-language model with strong single-image, multi-image and video understanding plus OCR capabilities.
multimodalvision-understandingopen-weights
≈ US$ 0,0015/execução
Community
Allen AI Molmo 7B-D on Replicate. Open vision-language model trained on the PixMo data, notable for pointing at and locating objects in images, not just describing them.
allenaimolmovision-understanding
≈ US$ 0,0505/execução
Community
Moondream2 small vision-language model on Replicate. About 1.9B params, designed to run on edge devices, handles captioning, visual QA and short OCR-style reads at very low cost.
moondreamvision-understandingopen-source
≈ US$ 0,0020/execução
Community
Allen AI olmOCR. Open-source 7B vision-language model fine-tuned for high-fidelity document parsing including math, code and tables.
ocrvision-understandingallenai
≈ US$ 0,0205/execução
Community
CMU OpenPose multi-person 2D pose estimator. Real-time keypoint detection for body, hand, face and foot using Part Affinity Fields.
posevision-understandingcmu
≈ US$ 0,0012/execução
Community
Baidu PaddleOCR v3 PP-OCR pipeline. Lightweight detector plus recognizer optimized for production use with 80+ language support.
ocrvision-understandingbaidu
≈ US$ 0,0216/execução
Community
Alibaba Qwen2-VL 7B served on Replicate. Open-weights vision-language model that chats about images and video, with dynamic resolution and strong OCR and document QA for its size.
qwenalibabavision-understanding
≈ US$ 0,0024/execução
Community
NVIDIA SegFormer-B5 semantic segmentation. Hierarchical transformer encoder with lightweight MLP decoder, strong ADE20k and Cityscapes results.
segmentationvision-understandingnvidia
≈ US$ 0,00030/execução
Community
Intel ZoeDepth metric depth-estimation model. Combines relative-depth pretraining with metric fine-tuning for absolute distance in real units.
depthvision-understandingintel
≈ US$ 0,00060/execução
xAI
xAI's May 2026 flagship. 1M context, vision, always-on reasoning, real-time X/web retrieval via DeepSearch.
reasoningvisiondeep-search
Não oferecido no momento
Anthropic
Anthropic Claude 3.5 Sonnet with image input. 200k context, strong on dense documents, tables, charts and handwriting. Reliable structured extraction from screenshots and scans.
visionmultimodaldocument-qa
Não oferecido no momento
Google DeepMind
Google Gemini 1.5 Pro with native multimodal input. Reads images, long PDFs, audio and video in up to a 2M-token context, useful for whole-document and long-video understanding.
geminivisionmultimodal
Não oferecido no momento
xAI's cost-efficient high-throughput model. 2M context, optional reasoning, optimized for agentic loops and real-time apps.
cost-efficientvisiondeep-search
Desativado
Salesforce
Salesforce BLIP large checkpoint for image captioning, served through Hugging Face Inference. Given a photo it returns a short English caption. The large variant gives more accurate captions than the base model and is a common drop-in for alt-text and image indexing.
blipcaptioningvision-understanding
Não oferecido no momento
Meta
Meta Detectron2 object-detection and segmentation toolkit. Mask R-CNN, Cascade R-CNN, panoptic FPN and many other model variants in one wrapper.
segmentationvision-understandingdetection
Desativado
Meta
Meta DINOv2 self-supervised vision backbone. Pretrained features for classification, segmentation and depth without task-specific fine-tuning.
segmentationvision-understandingopen-weights
Desativado
Community
DWPose whole-body 2D pose estimator. Two-stage knowledge-distilled model with strong accuracy on face, hands and body keypoints simultaneously.
posevision-understandingopen-source
Desativado
Google DeepMind
Google Gemini 1.5 Flash, the fast low-cost multimodal model. 1M-token context, image/audio/video input, good for high-volume captioning, classification and long-video skim tasks.
geminivisionmultimodal
Não oferecido no momento
xAI's vision-capable Grok 2 snapshot. Image-in, text-out with strong multilingual instruction following.
vision
Desativado
Community
Microsoft HRNet high-resolution pose-estimation backbone. Parallel multi-resolution streams yield strong accuracy on COCO keypoint benchmarks.
posevision-understandingmicrosoft
Desativado
Community
OpenGVLab InternVL 2.5 78B. Open-source vision-language model approaching GPT-4o on MMMU, OCRBench and Math-Vista benchmarks.
multimodalvision-understandingopengvlab
Desativado
Microsoft
Microsoft LayoutLMv3 multimodal document model. Unified text/image masking pretraining for form understanding, receipts and document QA.
ocrvision-understandingopen-source
Desativado
Meta's flagship vision-language model. 90B parameters, image understanding + chat, strong VQA performance.
llamamultimodalvision
Desativado
Community
LLaVA v1.6 on a Nous-Hermes-2 34B base, served on Replicate. Open-source vision-language assistant for image question answering, description and visual reasoning at higher resolution.
llavavision-understandingopen-source
Desativado
Community
LMMs-Lab LLaVA-OneVision 72B. Unified single-image, multi-image and video instruction-tuned VLM with task-transfer across modalities.
multimodalvision-understandingllava
Desativado
Community
Marker PDF-to-Markdown conversion pipeline. Combines layout, OCR and equation models to produce clean Markdown with preserved tables and formulas.
ocrvision-understandingpdf
Não oferecido no momento
Google DeepMind
Google MediaPipe Pose. Lightweight on-device-friendly 33-keypoint 3D pose estimator with optional segmentation mask output.
posevision-understandingopen-source
Desativado
Mistral AI
Mistral OCR API. Document-understanding model with strong table and equation extraction, and structured JSON output.
ocrvision-understandingapi
Desativado
Mistral AI
Mistral's 124B multimodal flagship. 123B decoder + 1B vision encoder, 128k ctx, up to 30 images per request.
pixtralmultimodalvision
Desativado
Community
OpenMMLab MMPose toolbox. Wraps RTMPose, HRNet, HigherHRNet and many other pose models behind a unified inference API.
posevision-understandingmmpose
Desativado
Microsoft
Microsoft Phi-3.5 Vision Instruct. Small (4.2B) multimodal model with strong document, OCR and multi-image reasoning at low cost.
multimodalvision-understandingopen-weights
Desativado
Alibaba (Qwen)
Alibaba's 72B vision-language model with M-RoPE and dynamic resolution. Strong document and video understanding.
multimodalvisionopen-weights
Desativado
Alibaba (Qwen)
Alibaba Qwen2.5-VL 7B via Hugging Face Inference. Open-weights image-text-to-text model with improved OCR, chart and table reading, object grounding and long-document understanding.
vision-understandingopen-weightsocr
Não oferecido no momento
Reka
Reka's frontier multimodal model supporting text, image, video and audio inputs.
multimodalvideo-understanding
Não oferecido no momento
Reka
Reka's small on-device-friendly multimodal model. ~7B parameters, 16k context.
multimodaledgesmall
Não oferecido no momento
Reka
Reka's 21B dense multimodal model balancing speed and quality. Up to 128k context.
multimodalcost-efficient
Não oferecido no momento
Community
ETH Zurich SAM-HQ. High-quality mask refinement on top of SAM. Sharper edges and finer structure than the original Segment Anything model.
segmentationvision-understandingopen-source
Desativado
Microsoft
Microsoft TrOCR large transformer-based OCR. End-to-end visual encoder plus text decoder, trained on synthetic and printed real-world data.
ocrvision-understandingopen-source
Desativado
Community
ViTPose plain-vision-transformer pose estimator. State-of-the-art keypoint accuracy on MS-COCO with a minimal architecture.
posevision-understandingtransformer
Desativado
01.AI
01.AI Yi-VL 34B vision-language model. Bilingual (CN/EN) image understanding, strong CMMMU and MMMU performance among open-weights VLMs.
multimodalvision-understanding01ai
Desativado
As páginas permanecem online, mas os modelos não podem ser executados no momento.
Os modelos multimodais aceitam texto mais imagens (por vezes mais áudio ou vídeo) e produzem output em texto. Recorre-se a um quando o input contém imagens e o output é informação estruturada: extrair uma fatura, descrever um gráfico, transcrever uma nota manuscrita, responder a perguntas sobre um screenshot de UI.
O pricing é por token como nos LLMs normais, com uma particularidade: cada imagem é contada como um número fixo de tokens — tipicamente 250-1.500 tokens conforme a resolução e o modo de detalhe. Uma imagem padrão de 1024×1024 custa aproximadamente o mesmo que um input de texto de 1.000 palavras. O modo high-detail (preservando texto fino e elementos pequenos de UI) custa 2-4× mais. Planeie orçamentos em conformidade — uma carga que processa milhares de scans de recibos por dia sobe depressa a tarifas flagship; multiplique o preço por token da página do modelo pelo seu número de tokens de imagem.
O compromisso é exatidão de OCR, qualidade de raciocínio e custo. Os flagships (GPT-5 Vision, Claude 4.6, Gemini 2.5) leem layouts complexos e raciocinam sobre o conteúdo de gráficos com grande fiabilidade. Modelos especializados OCR-first (Qwen 2.5 VL, Pixtral, InternVL) por vezes superam na extração pura de texto a uma fração do custo. Para pipelines puras de documento-para-JSON, um modelo especializado com um JSON schema estrito ganha quase sempre. Para cargas de documento-e-raciocínio ('extrai esta fatura E diz-me se as contas do IVA estão certas'), ganham os flagships.
Atenção aos limites de resolução: a maior parte dos modelos reduz imagens muito grandes antes de processar, o que pode destruir texto fino em screenshots e em documentos densos. Pré-processe — corte documentos altos em imagens single-page, faça upscale de scans de baixa resolução antes de enviar — para preservar a legibilidade. Atenção também a alucinações em regiões difíceis de ler; os modelos multimodais tendem a inventar com confiança texto onde a fonte é ilegível.
As top picks acima cobrem o flagship mais exato, o cavalo de batalha mais barato, o que suporta resolução mais alta e a opção de streaming mais rápida.
O GPT-5 Vision e o Claude 4.6 lideram em layouts complexos, gráficos e manuscrito. Para OCR puro em documentos limpos, o Qwen 2.5 VL e o Pixtral costumam igualar a qualidade flagship a um décimo do custo. Corra uma amostra dos seus documentos em cada um antes de se comprometer.
Cada imagem é convertida num número fixo de tokens — tipicamente 250-1.500 tokens consoante a resolução e o modo de detalhe. Por isso, uma imagem 1024×1024 custa aproximadamente o mesmo que ~1.000 tokens de texto. Documentos multipágina multiplicam linearmente; verifique cada cartão de modelo para as tarifas exatas de image-token.
JPEG, PNG, WebP e GIF (primeiro frame) são universais. Alguns modelos aceitam também PDF diretamente (uma imagem por página). O tamanho máximo do ficheiro é tipicamente 20 MB; dimensões máximas 8K num dos lados. Redimensione ficheiros maiores antes para evitar downscaling silencioso.
Os flagships lidam com manuscrito claro de forma fiável e com a maior parte da escrita cursiva nas línguas principais. A qualidade cai em escrita muito estilizada, tinta esbatida e estenografia complexa. Para cargas de manuscrito de alto volume, faça fine-tuning numa amostra do seu domínio ou combine com um pré-processador OCR especializado.
Sim — a leitura de gráficos é um dos use-cases mais fortes. Os flagships extraem pontos de dados de gráficos de barras, lineares e circulares; raciocinam sobre escalas de eixos e identificam tendências. Para figuras científicas densas, peça output estruturado (CSV ou JSON) em vez de descrição narrativa.
A qualidade degrada-se bruscamente abaixo de 150 DPI ou acima de 30% de ruído. Pré-processe com deskewing, normalização de contraste e denoising leve. Para scans muito fracos, faça primeiro correr um upscaler (de /models/image) para restaurar a legibilidade antes de enviar.
Sim — a maior parte dos flagships aceita 10-20 imagens num único prompt. Útil para comparar screenshots, processar documentos multipágina numa só passagem ou analisar sequências de frames. O número total de tokens (incluindo todos os image-tokens) tem de caber dentro da janela de contexto.
Alguns modelos multimodais (Gemini 2.5 Pro, Qwen 2.5 VL) aceitam vídeo diretamente e amostram frames internamente. Noutros, extraia os frames (a cada 1-2 segundos é típico) e envie-os como prompt multi-imagem. Para análise de vídeo em tempo real, veja modelos dedicados de video understanding.
Todos os modelos disponíveis através de uma API compatível com OpenAI. Créditos pré-pagos em USD, sem assinatura.