Talent.com
Multimodal AI Evaluation Analyst
Multimodal AI Evaluation AnalystiMerit Technology • boituva, Brazil
Multimodal AI Evaluation Analyst

Multimodal AI Evaluation Analyst

iMerit Technology • boituva, Brazil
Há 5 dias
Descrição da vaga

Job Description : Multimodal AI Evaluation Analyst

Target Language : English

Company : iMerit Scholars

Position Type : - Remote; Contract ($5 / hour); ~10-40 hours per week

Position Overview :

iMerit Scholars is rapidly expanding our network of skilled AI Evaluation Analysts to help advance next-generation multimodal AI systems.

This opportunity begins with a short paid pilot project (~12 hours total). Successful participants may be invited to continue with ongoing project work (typically 15–40 hours per week), depending on performance and project needs.

As a Multimodal AI Evaluation Analyst, you’ll perform highly detailed evaluations of AI system outputs across text, image, video, and multimodal prompts. Your feedback will directly influence how leading AI systems understand and interact with the world.

Compensation & Work Structure

  • Rate : $5 / hour
  • Phase 1 : ~12-hour paid pilot project (completed within a few days)
  • Phase 2 : Ongoing contract work (typically 15–40 hours / week) for top performers

What You’ll Do

  • Evaluate and score AI-generated outputs (text, image captions, video descriptions, multimodal prompts)
  • Assess quality, correctness, coherence, style, and cultural alignment
  • Identify subtle issues like hallucinations, logical gaps, or bias
  • Provide detailed written feedback and apply complex evaluation guidelines consistently
  • Collaborate with Quality Leads and Project Managers to ensure reliability and accuracy
  • What You Bring

  • Excellent critical reading and evaluation skills across multiple modalities
  • Strong English comprehension (CEFR B2 or above)
  • Familiarity with LLMs, generative AI, and multimodal systems
  • Exceptional attention to detail and consistency
  • Comfort with iterative feedback, evolving workflows, and nuanced judgments
  • Prior experience in data annotation, AI evaluation, or related work (preferred)
  • Preferred Qualifications

  • BA degree (preferred) or comparable experience
  • Experience working with annotation tools or AI data platforms
  • Understanding of multimodal communication (text-to-image, video narratives, etc.)
  • Comfort with fast-paced projects and evolving quality standards
  • Awareness that incidental exposure to sensitive or NSFW content may occur
  • Why Join iMerit Scholars

  • Help shape how cutting-edge AI systems understand the world
  • Work remotely on projects at the forefront of multimodal AI
  • Gain hands-on experience in applied AI evaluation
  • Collaborate with a global, expert community of AI trainers
  • Next Steps

  • Start by taking the 30-minute skill assessment
  • Qualified applicants will be invited by email to a paid 12-hour pilot project (includes 2 hours paid training)
  • Strong results in the pilot may lead to ongoing, flexible remote work (15–40 hrs / week) with iMerit Scholars.
  • Criar um alerta de emprego para esta pesquisa

    Analyst • boituva, Brazil

    Vagas relacionadas
    Senior Market Research Analyst

    Senior Market Research Analyst

    Worldpanel • salto, Brasil
    Já pensou em trabalhar em uma empresa líder global em dados, insights e consultoria, que contribui para o sucesso e crescimento das principais organizações do mundo? Então essa é a sua chance!.A Wo...Mostre mais
    Última atualização: 6 dias atrás • Promovida
    Talent Data Analyst - Remote

    Talent Data Analyst - Remote

    INDI Staffing Services • Salto, São Paulo, Brazil
    At INDI, we're passionate about empowering individuals and businesses worldwide.Our cutting-edge recruiters connect leading companies with top talent, fostering a dynamic environment where innovati...Mostre mais
    Última atualização: há mais de 30 dias • Promovida
    Multimodal AI Evaluation Analyst

    Multimodal AI Evaluation Analyst

    iMerit Technology • hortolândia, Brasil
    Job Description : Multimodal AI Evaluation Analyst.Remote; Contract ($5 / hour); ~10-40 hours per week.Merit Scholars is rapidly expanding our network of skilled AI Evaluation Analysts to help advance...Mostre mais
    Última atualização: 5 dias atrás • Promovida
    Sênior Gen AI Engineer - Inglês avançado / fluente

    Sênior Gen AI Engineer - Inglês avançado / fluente

    Hays • sorocaba, Brazil
    Contratação PJ - valor em reais.Cliente internacional - pode haver necessidade de atuar em outro fuso horário.Você é apaixonado por Inteligência Artificial Generativa e quer trabalhar com tecnologi...Mostre mais
    Última atualização: 5 dias atrás • Promovida
    Principal AI Engineer - AI in Healthcare

    Principal AI Engineer - AI in Healthcare

    Stealth Healthcare AI Startup • boituva, Brasil
    We are a stealth-stage healthcare AI startup that is the missing link in healthcare revenue management, bridging the gap between clinical care and financial operations. We're transforming how primar...Mostre mais
    Última atualização: há mais de 30 dias • Promovida
    Generative AI Engineer

    Generative AI Engineer

    AnswerThis (YC F25) • salto, Brazil
    Remote (Applications open worldwide).Semantic Search, Vector Databases, Prompt Engineering, GenAI Frameworks, React Agents, Graph Agents, Document Parsing, Python, Scalable APIs.AnswerThis is an AI...Mostre mais
    Última atualização: 5 dias atrás • Promovida
    Machine Learning Engineer

    Machine Learning Engineer

    Flatiron Software • salto, Brazil
    Flatiron is a global remote software development company with engineers located around the world.We unite experts from diverse backgrounds and experiences in a collaborative culture to deliver exce...Mostre mais
    Última atualização: 5 dias atrás • Promovida
    Senior Data Analyst / Modeler – Snowflake / Power BI

    Senior Data Analyst / Modeler – Snowflake / Power BI

    Rapida Solutions • Itu, São Paulo, Brazil
    About Us Rapida Solutions is an international data consultancy with teams across Thailand, Australia, and Brazil.We help global organizations unlock value from their data through modern cloud plat...Mostre mais
    Última atualização: 11 horas atrás • Promovida • Nova!
    Procuramos professor particular de Inglês em Tatuí

    Procuramos professor particular de Inglês em Tatuí

    Superprof • Tatuí, BR
    Superprof é a ferramenta de compartilhamento de conhecimento por excelência.Conectamos quem quer aprender e quem quer ensinar. Criado em agosto de 2013, o Superprof conecta alunos e professores para...Mostre mais
    Última atualização: há mais de 30 dias • Promovida
    Artificial Intelligence Engineer

    Artificial Intelligence Engineer

    Astra AI • Hortolândia, São Paulo, Brazil
    Location : San Francisco, CA - Remote (LATAM preferred) Work Type : Full-Time We’re partnering with a confidential, high-growth technology company in Silicon Valley that’s building AI-powered platf...Mostre mais
    Última atualização: há mais de 30 dias • Promovida
    Senior AI / ML Engineer

    Senior AI / ML Engineer

    LinkedinBrazil • sorocaba, Brazil
    DashLX is an innovative technology company specializing in advanced AI solutions, focused on developing intelligent systems that leverage knowledge bases, multi-context processing, and custom auton...Mostre mais
    Última atualização: 1 dia atrás • Promovida
    AI / ML Specialist

    AI / ML Specialist

    GFT Technologies Brasil • indaiatuba, Brazil
    Com mais de 35 anos de mercado e localizada em 16 países, a GFT emprega mais de 12.Aqui, a diversidade, a igualdade e a inclusão estão no centro e garantir um ambiente de trabalho seguro para todas...Mostre mais
    Última atualização: 5 dias atrás • Promovida
    Artificial Intelligence Engineer

    Artificial Intelligence Engineer

    Adopt AI • sorocaba, Brazil
    We’re looking for a full-stack engineer who loves building.You’ll work across the stack—from React front-ends to Python-based agent frameworks—bringing new AI capabilities to life inside real appli...Mostre mais
    Última atualização: 5 dias atrás • Promovida
    AI Engineer | Agents

    AI Engineer | Agents

    Bren • Itu, São Paulo, Brazil
    Estamos buscando um(a) Engenheiro(a) de IA Generativa (Generative AI Engineer) para ser uma peça-chave no desenvolvimento e evolução da nossa plataforma de Agentic AI. Na Bren, não construímos ch...Mostre mais
    Última atualização: 11 horas atrás • Promovida • Nova!
    KYC Analyst(remote)

    KYC Analyst(remote)

    Gate • boituva, Brazil
    Conduct international verification case reviews, including individual and corporate verifications.Review and confirm the results of Anti-Money Laundering (AML) and economic sanctions blacklist scre...Mostre mais
    Última atualização: 5 dias atrás • Promovida
    Procuramos professor particular de Inglês em Itapetininga

    Procuramos professor particular de Inglês em Itapetininga

    Superprof • Itapetininga, BR
    Superprof é a ferramenta de compartilhamento de conhecimento por excelência.Conectamos quem quer aprender e quem quer ensinar. Criado em agosto de 2013, o Superprof conecta alunos e professores para...Mostre mais
    Última atualização: há mais de 30 dias • Promovida
    Procuramos professor particular de Português em Tatuí

    Procuramos professor particular de Português em Tatuí

    Superprof • Tatuí, BR
    Superprof é a ferramenta de compartilhamento de conhecimento por excelência.Conectamos quem quer aprender e quem quer ensinar. Criado em agosto de 2013, o Superprof conecta alunos e professores para...Mostre mais
    Última atualização: há mais de 30 dias • Promovida
    Lead Engineer – Agentic AI

    Lead Engineer – Agentic AI

    Tata Consultancy Services • votorantim, Brazil
    Join one of the biggest IT Services companies in the world! Here you can transform your career!.Why join TCS? Here at TCS we believe that people make the difference, that's why we live a culture of...Mostre mais
    Última atualização: 5 dias atrás • Promovida