Junte-se ao Project Spearmint, uma iniciativa multilíngue de avaliação de respostas de IA que analisa as saídas de modelos de linguagem (LLMs) em diferentes idiomas, com foco em Tone (Tom) ou Fluency (Fluência). Você deve ter fluência nativa no idioma-alvo e excelente compreensão de inglês.

Como avaliador, você analisará conjuntos de dados curtos e pré-segmentados e julgará respostas geradas por modelos com base em critérios específicos de qualidade. Seu trabalho ajudará a validar estruturas de avaliação e a estabelecer referências de qualidade (benchmarks) para futuras melhorias nos modelos.

Principais responsabilidades:
– Avaliar respostas do modelo no seu idioma nativo, com foco em Tone ou Fluency.
– Avaliar a qualidade geral, a precisão e a naturalidade de cada resposta.
– Ler o enunciado do usuário e duas respostas do modelo e, em seguida, atribuir uma nota a cada uma usando uma escala de cinco pontos.
– Fornecer explicações breves para quaisquer avaliações extremas.

Visão geral do projeto:
Lote 1 – Tone: Verifique se as respostas são úteis, perspicazes, envolventes e justas. Identifique problemas como inadequação de formalidade, condescendência, viés ou outras questões de tom.
Lote 2 – Fluency: Avalie correção gramatical, clareza, coerência e fluxo natural.

Esta é uma oportunidade baseada em projetos por meio da CrowdGen, na qual você se juntará à Comunidade da CrowdGen como Prestador de Serviços Independente (Independent Contractor). Se for selecionado, a CrowdGen enviará um e-mail com instruções para criar uma conta usando seu endereço de e-mail de inscrição. Você precisará fazer login, redefinir sua senha, concluir os requisitos de configuração e prosseguir com sua candidatura para a vaga.

Ajude a moldar o futuro da IA—candidate-se hoje e contribua de casa.

US$ 3,70–US$ 3,70 por hora