Use Cases / screenshot-ui-box
Jev Screenshot UI Box (beta)
Entradas de imagem e perguntas Box são beta e dreamer-ready, não recomendadas para produção. Agentes de produto e QA ainda querem um sinal tipado “onde está o botão principal?” em screenshots.
Try a related template free on this host — 5 anonymous real-API runs with no signup — then ship the same schema with a prepaid jv_live_ key. See is Jev free? and playground.
Why Jev
Passe o screenshot como asset de imagem e faça uma pergunta box pela região de UI. Você obtém um único bounding box que o overlay pode destacar — útil para demos e harnesses de eval, não como único alvo de clique em produção.
How to define the decision
assets.screenshot = { type: "image", format: "png", data_base64: "…" }. questions.cta = { type: "box", instructions: "Find the primary CTA button in screenshot" }. Mantenha as instruções concretas.
When to use Jev
- Protótipos de grounding de UI de agentes
- Demos de anotação de screenshots
- Comparar Jev box vs um detector de UI dedicado
When not to use Jev
- Auto-clicar UIs de produção só com o box
- Certificação de conformidade de acessibilidade
- Parsing de layout multi-elemento
Failure modes and human fallback
- Upstream or network errors: retry with backoff; do not invent a decision.
- Low confidence: route to a human queue or safer default — never auto-act on money/destructive tools.
- Schema drift: keep a golden fixture set in CI so label changes fail the build before production.
- Oficial: entradas de imagem e perguntas Box são beta e dreamer-ready, não recomendadas para produção.
- Screenshots podem conter PII — remova segredos antes de enviar assets.
- Este host ainda não oferece ferramenta playground de upload de screenshot — use a API ou a preview local da homepage.
API example
Same prepaid jv_live_ balance as tools. Output tokens are free on this host's metering model.
curl https://jevtypesafe.org/api/v1/decide \
-H "Authorization: Bearer jv_live_YOUR_KEY_HERE" \
-H "Content-Type: application/json" \
-d '{"state":"Customer: I've been waiting five days for my refund.","questions":{"action":{"type":"choice","instructions":"Decide the next step","criteria":{"allow":"safe","review":"unsure","block":"unsafe"}}}}'FAQ
- Posso usar para auto-clicar meu app?
- Não para produção. Entradas de imagem e perguntas Box são beta e dreamer-ready, não recomendadas para produção.
- Onde a forma da API está documentada?
- Veja /docs/api/ para assets e box (beta), incluindo o disclaimer oficial.
Related use cases
Ready to build?
Free anonymous tool runs, then prepaid packs and a jv_live_ key — independent host, not affiliated with TypeSafe AI.