Use Cases / screenshot-ui-box
Jev Screenshot UI Box (beta)
Image inputs и Box-вопросы — beta и dreamer-ready, не рекомендуются для продакшена. Product- и QA-агентам всё же нужен типизированный сигнал «где главная кнопка?» на скриншотах.
Try a related template free on this host — 5 anonymous real-API runs with no signup — then ship the same schema with a prepaid jv_live_ key. See is Jev free? and playground.
Why Jev
Передайте скриншот как image asset и задайте box-вопрос по UI-региону. Получите один bounding box, который overlay может подсветить — для демо и eval-харнесов, не как единственную цель клика в продакшене.
How to define the decision
assets.screenshot = { type: "image", format: "png", data_base64: "…" }. questions.cta = { type: "box", instructions: "Find the primary CTA button in screenshot" }. Держите инструкции конкретными.
When to use Jev
- Прототипы UI grounding агентов
- Демо аннотации скриншотов
- Сравнение Jev box с выделенным UI-детектором
When not to use Jev
- Авто-клик продакшен-UI только по box
- Сертификация accessibility compliance
- Парсинг multi-element layout
Failure modes and human fallback
- Upstream or network errors: retry with backoff; do not invent a decision.
- Low confidence: route to a human queue or safer default — never auto-act on money/destructive tools.
- Schema drift: keep a golden fixture set in CI so label changes fail the build before production.
- Официально: image inputs и Box-вопросы — beta и dreamer-ready, не рекомендуются для продакшена.
- Скриншоты могут содержать PII — удалите секреты перед отправкой assets.
- Этот хост пока не даёт playground-инструмент загрузки скриншотов — используйте API или homepage local preview.
API example
Same prepaid jv_live_ balance as tools. Output tokens are free on this host's metering model.
curl https://jevtypesafe.org/api/v1/decide \
-H "Authorization: Bearer jv_live_YOUR_KEY_HERE" \
-H "Content-Type: application/json" \
-d '{"state":"Customer: I've been waiting five days for my refund.","questions":{"action":{"type":"choice","instructions":"Decide the next step","criteria":{"allow":"safe","review":"unsure","block":"unsafe"}}}}'FAQ
- Можно ли авто-кликать приложение?
- Не для продакшена. Image inputs и Box-вопросы — beta и dreamer-ready, не рекомендуются для продакшена.
- Где задокументирована форма API?
- См. /docs/api/ для assets и box (beta), включая официальный disclaimer.
Related use cases
Ready to build?
Free anonymous tool runs, then prepaid packs and a jv_live_ key — independent host, not affiliated with TypeSafe AI.