Welocalize · via Welocalize

Andromeda MU - Image Quality Rater - India (Remote)

India · Contract · Posted Nov 19, 2026 · Still listed Nov 19, 2026 · $3.5/hr

Many AI evaluation platforms screen applicants with a qualification test or interview. Module 1 of our AI Evaluator Certification is a free introduction to the judgment those screens look for.

Start the free module

Posted by Welocalize. Annotation Academy is not the employer; apply on Welocalize's site.

We are seeking detail-oriented reviewers to evaluate AI-generated product images. You will compare each image against the listed products’ catalog photos and titles, assess five defect groups, and decide whether to keep or discard each image with a brief comment when discarding.

 

Project Details:

  • Engagement Type: Freelancer
  • Location - India (Remote)
  • Rate - $3.50/hr
  • Estimated Hours - 30hrs

Responsibilities

  • Open each image at 100% zoom and compare it to the catalog photo and title of every listed product
  • Decide to keep or discard each image; record a brief reason and comment when discarding
  • Evaluate five defect groups and mark PASS or FAIL according to the guideline:
  • Product
  • People and animals
  • Safety and policy
  • Physics and placement
  • Text and finish
  • On any FAIL, select all applicable defect items, point out the issue location(s) on the image, and write one short, clear comment explaining what is wrong and where
  • Follow SOPs precisely and apply binary rules consistently without adding your own severity scale
  • Meet daily productivity and accuracy targets; escalate unclear cases when needed

Must-Have Qualifications

  • Strong English reading and writing skills; able to follow detailed guidelines and write short, clear defect comments
  • Excellent visual attention to detail; able to spot extra fingers, garbled or foreign text, warped objects, off-brand or public-figure logos at 100% zoom
  • Ability to apply PASS/FAIL rules consistently without over-flagging
  • Familiarity with US consumer products, brands, and shopping pages; can judge plausible scenes, use-cases, sizes, and recognize foreign brand marks and public figures
  • Comfortable reviewing sensitive content, including violence, nudity, and images that may show minors, per policy and training
  • Laptop/desktop computer and stable internet connection; comfortable using web-based annotation tools

Nice-to-Have Qualifications

  • Experience rating/evaluating AI-generated images or other AI outputs
  • Background in e-commerce, product catalog, content moderation, search or product quality review
  • Experience working from a detailed SOP and passing gold-standard accuracy checks

Listing sourced from Welocalize. Annotation Academy is independent of these platforms and does not guarantee work or pay. See our disclosures.