Participe do Projeto Spearmint, uma iniciativa de avaliação de IA multilíngue focada na revisão de respostas geradas por modelos de linguagem (LLM) em diversos idiomas, com ênfase em Tom ou Fluência. Para participar, é necessário ter fluência nativa no idioma-alvo e boa compreensão do inglês.
Como avaliador(a), você analisará conjuntos de dados curtos e pré-divididos, avaliando as respostas geradas por IA com base em critérios de qualidade definidos. Seu feedback ajudará a validar os métodos de avaliação e a estabelecer padrões de qualidade para futuras melhorias dos modelos.
Responsabilidades principais:
– Avaliar respostas de IA no seu idioma nativo, com foco em Tom ou Fluência.
– Julgar a qualidade geral, precisão e naturalidade das respostas.
– Ler um prompt do usuário e duas respostas geradas por modelos, avaliando cada uma em uma escala de cinco pontos.
– Fornecer breves explicações para avaliações extremas.
Detalhes do projeto:
Lote 1 – Tom: Avaliar se as respostas são úteis, envolventes, justas e perspicazes. Identificar problemas como formalidade inadequada, condescendência, viés ou outras questões de tom.
Lote 2 – Fluência: Revisar respostas quanto à gramática, clareza, coerência e fluidez natural.
Esta é uma função baseada em projeto com a CrowdGen, na qual você atuará como Contratado(a) Independente. Se selecionado(a), você receberá um e-mail da CrowdGen para criar uma conta usando o e-mail da sua inscrição. Será necessário fazer login, redefinir sua senha, concluir as etapas de configuração e continuar com sua candidatura.
Ajude a moldar o futuro da IA — inscreva-se agora e contribua de casa.
Pagamento: US$ 2 – US$ 20,22 por hora.
To apply for this job, please visit jobs.lever.co