Çok Dilli AI Kalite Değerlendirmesinde Trafik Analisti - Stockholm

Görev hakkında

AI tarafından üretilen ve AI tarafından çevrilen içeriğin kalitesini geliştirebilecek, test edebilecek ve iyileştirebilecek, çok dilli AI kalite değerlendirmesi alanında bir Trafik Analisti arıyoruz. İçeriğin doğru, akıcı ve kültürel olarak uygun olduğundan emin olan değerlendirme çerçeveleri, veri setleri ve puanlama yöntemleri oluşturursunuz.

Rol, AI destekli dil çözümlerinde kalite ve güvenilirliği sürekli olarak iyileştirmek için ML mühendisleri ve dil uzmanlarıyla yakın işbirliği içinde değerlendiricileri kalibre etmeyi, model hatalarını analiz etmeyi içerir.

İş görevleriniz

Çok dilli içerik için değerlendirme kriterleri geliştirin ve puanlama protokolleri tanımlayın.

AI tarafından üretilen ve AI tarafından çevrilen materyalin kalite değerlendirmesi için veri setleri oluşturun ve sürdürün.

Değerlendirme modellerinin eğitimi ve kalibrasyonunu destekleyin ve puanlamayı doğrulayın.

Kalite ve değerlendirme için dil ve pazar spesifik yönergeleri belgeleyin.

Kalite açıklarını belirleyin, model hatalarını analiz edin ve değerlendirme mantığında iyileştirmeler önerin.

Platformlarda dilsel kalitenin sürekli iyileştirilmesini sağlayan geri bildirim süreçlerine katkıda bulunun.

Beklenen teslimler

Dil/pazar başına oluşturulmuş ve belgelenmiş değerlendirme çerçeveleri.

Farklı içerik türleri için kalite güvenceli veri setleri ve net puanlama kriterleri.

Model hataları analiz raporları ve iyileştirme önerileri.

Kalibrasyon materyalleri ve ML ekibine eğitim ve ince ayar çalışmalarında destek.

Sürekli kalite izleme için iyileştirilmiş süreçler.

Profiliniz

Dil kalitesi değerlendirmesi, uygulamalı dilbilim, veri dilbilimi veya dil ile ilgili araştırma ortamlarında deneyim.

Çok dilli ortamlarda LLM değerlendirmesi, makine çevirisi değerlendirmesi veya açıklama süreçleri deneyimi.

MQM, MetricX veya COMET gibi çerçeveler ve çok boyutlu değerlendirme modelleri konusunda iyi anlayış ve deneyim.

GenAI değerlendirme yöntemlerine aşinalık, prompt testi, model kalibrasyonu ve puan doğrulama dahil.

ML ekipleriyle veri boru hatları, açıklama ve/veya değerlendirici ince ayarı konusunda işbirliği deneyimi.

Birden fazla pazarda güçlü dilsel ve kültürel anlayış ve içerik türü başına kalite tanımlama yeteneği.

Tercih edilen:

Programatik QA, örneğin kural tabanlı kontroller veya Python, YAML veya gRPC ile API odaklı doğrulama.

Değerlendiriciler arası güvenilirlik (Krippendorff alfa, Cohen κ) ve/veya insan ve AI tarafından üretilen değerlendirmeler arası karşılaştırmalar deneyimi.

Kişisel özellikler

Analitik, dikkatli ve detayda kalite ile yapılandırılmış çalışmayı seven bir yapıdasınız. Dil ve teknoloji arasındaki kesişimde çalışmaktan hoşlanıyorsunuz, iletişim kurabilen ve fonksiyonlar arası işbirliğine alışkınsınız. Ayrıca, önceliklendirme, net belgeleme ve içgörüden pratiğe iyileştirmeleri yönlendirme yeteneğiniz var.

Konum: Stockholm Kapsam: %100 Süre: 2025-12-15 – 2026-06-04 Son başvuru tarihi: 2025-12-04

Sway Sourcing, doğru yeteneği doğru şirketle hızlı ve etkili bir şekilde eşleştirmekte uzmanlaşmış yenilikçi bir işe alım ortağıdır. Ana odak noktamız Ekonomi, İdare, İK, Pazarlama ve BT alanlarındadır, ancak tüm sektörlerde özelleştirilmiş işe alım çözümleri sunmak için gereken geniş uzmanlık ve esnekliğe de sahibiz.

Nispeten yeni bir oyuncu olmamıza rağmen, İsveç'in birçok büyük şirketinde güven oluşturduk ve hem ulusal hem de uluslararası düzeyde çalışıyoruz. İsveç ve İspanya'daki üslerimizle, yerel uzmanlık ve küresel erişimin benzersiz bir kombinasyonunu sunuyoruz. Güçlü ağımız ve derin sektör içgörülerimiz, işe alımda bir adım önde olmak isteyen şirketler için doğal bir ortak haline getiriyor.