Аналитичар саобраћаја у вишејезичкој процени квалитета вештачке интелигенције - Стокхолм

О задатку

Тражимо аналитичара саобраћаја у вишејезичкој процени квалитета вештачке интелигенције који може да развија, тестира и побољшава квалитет АИ-генерисаног и АИ-преведеног садржаја. Креирате оквире за процену, скупове података и методе бодовања које обезбеђују да је садржај тачан, течан и културно релевантан.

Улога подразумева блиску сарадњу са МЛ инжењерима и језичким стручњацима за калибрацију евалуатора, анализу грешака модела и континуирано побољшање квалитета и поузданости у АИ-воденим језичким решењима.

Ваши задаци

Развијајте критеријуме за процену и дефинишите протоколе бодовања за вишејезички садржај.

Креирајте и одржавајте скупове података за процену квалитета АИ-генерисаног и АИ-преведеног материјала.

Подржавајте обуку и калибрацију модела за процену и валидирајте бодовање.

Документујте језичке и тржишно-специфичне смернице за квалитет и процену.

Идентификујте недостатке у квалитету, анализирајте грешке модела и предлажите побољшања у логици процене.

Допринесите процесима повратних информација који покрећу континуирано побољшање језичког квалитета на платформама.

Очекивани резултати

Успостављени и документовани оквири за процену по језику/тржишту.

Квалитетно осигурани скупови података и јасни критеријуми бодовања за различите врсте садржаја.

Извештаји анализе грешака модела и препоруке за побољшања.

Материјали за калибрацију и подршка МЛ тиму у раду на обуци и фино подешавању.

Побољшани процеси за континуирано праћење квалитета.

Ваш профил

Искуство у процени језичког квалитета, примењена лингвистика, лингвистика података или језичка истраживачка средина.

Навика у процени ЛЛМ, процени машинског превођења или процесима анотације у вишејезичким срединама.

Добро разумевање оквира као што су МQМ, МетрицX или ЦОМЕТ и искуство са вишедимензионалним моделима процене.

Упознат са методама процене ГенАИ, укључујући тестирање промпта, калибрацију модела и валидацију бодовања.

Искуство у сарадњи са МЛ тимом око податковних цевовода, анотације и/или финог подешавања евалуатора.

Јако језичко и културно разумевање преко више тржишта и способност дефинисања квалитета по врсти садржаја.

Погодно:

Програмска контрола квалитета, нпр. контрола заснована на правилима или АПИ-водена валидација са Пyтхон, YАМЛ или гРПЦ.

Искуство са поузданошћу између процењивача (Криппендорфф алфа, Цохен κ) и/или поређења између људских и АИ-генерисаних процена.

Личне особине

Аналитични сте, пажљиви и волите да радите структурирано са квалитетом у детаљима. Уживате у граничном подручју између језика и технологије, комуникативни сте и навикли на међуфункционалну сарадњу. Такође имате способност да приоритизирате, јасно документујете и покрећете побољшања од увида до праксе.

Локација: Стокхолм Обим: 100% Период: 2025-12-15 – 2026-06-04 Крајњи рок за пријаву: 2025-12-04

Сwаy Соурцинг је иновативни партнер за регрутовање који се специјализује за упаривање правог талената са правом компанијом – брзо и ефикасно. Наш главни фокус је у области Економије, Администрације, Људских ресурса, Маркетинга и ИТ-а, али такође поседујемо широку експертизу и флексибилност потребну за испоруку прилагођених решења за регрутовање у свим индустријама.

Упркос томе што смо релативно нови актер, већ смо изградили поверење код многих највећих компанија у Шведској и радимо и национално и интернационално. Са базама у Шведској и Шпанији, нудимо јединствену комбинацију локалне експертизе и глобалног досега. Наша јака мрежа и дубоко разумевање индустрије чине нас природним партнером за компаније које желе да буду корак испред у свом регрутовању.