LILT (Production)-logo
Kuukausipalkka
€6 945 - €10 417
Julkaistu 23. helmikuuta 2026 · 188 päivää sittenViimeksi nähty 26. elokuuta 2026Arvioitu päättymispäivä 30. maaliskuuta 2026

Benchmarkinsinööri

AI Benchmark Insinööri
Kuinka tämä palkka vertautuu muihin
Palkkayhteys: Benchmarkinsinööri

Vie hiiri rivin päälle tai napauta riviä nähdäksesi täydelliset tilastot (EUR / kk tässä kaaviossa).

Tietoa tehtävästä

Tilaisuutta varten Rakennamme huolellisen ja varmennettavan arviointisarjan Terminal-Bench-tehtävistä, joiden tarkoituksena on testata suurten kielimallien kykyä monikielisissä ohjelmistohaasteissa. Tavoitteena on mitata monikielistä sietokykyä sekä tulostus- ja merkkikoodausongelmien hallintaa terminaaliarbeissa. Haemme äidinkielellä sujuvia ohjelmistoinsinöörejä suunnittelemaan, rakentamaan ja validoimaan nämä benchmarkit. Luot tehtäviin korkean signaalin ja laadunmmeina, jotka testaa mallin kykyä käsitellä monikielisiä ympäristöjä ilman englannin käännöksiä. Huom. tämä on etäfreelance-tilaisuus Mitä toimitat Tehtävän suunnittelu: Arvioinnin ohjelmoinnille. Omaisuuksien luominen: realististen tehtäväympäristöjen rakentaminen omassa äidinkielessäsi. Näiden materiaalien on pysyttävä kohdekielessä oikean monikielisen käsittelyn mittaamiseksi. Käyttöohjeet & käännökset: löytää virhetilanteita, joissa AI ei toimi äidinkielelläsi. Toteutus & varmennus: tukea vankkoja ratkaisuja ja kirjoittaa luotettavia varmennusskriptejä. Kalibrointi & suoritukset: analysoi suoritustiedot ja säädä tehtävän vaikeustasoa eri malliluokille. Laadunvarmistus: osallistua nelitasoiseen laadunvarmistusprosessiin ihmisarviointien ja automaattisten tarkastusten ohella.

Työn tiedot

Vastuualueet

  • Tehtävän suunnittelu: Arviointien ohjelmointi agentteja varten.
  • Välivarastointi: Rakenna realistisia tehtäväympäristöjä äidinkielelläsi.
  • Kehote & käännös: löytää virhepisteet omalla kielellä.
  • Toteutus & varmennus: tukea robostin ratkaisujen kehittämistä ja kirjoittaa luotettavia varmennusskriptejä.
  • Kalibrointi & suoritukset: analysoi suoritustietoja ja säädä tehtävän vaikeutta.
  • Laadunvarmistus: osallistu nelitasoiseen laadunvarmistusprosessiin.

Vaatimukset

  • Kokemus: 1+ vuoden alalla kokemusta ohjelmistojen tai ohjausmallien parissa.
  • Tausta: Näyttävä menestystarina johtavista teknologiayrityksistä ja/tai diplomi-insinöörin koulutus huippuyliopistoista.
  • Kieli: Äidinkielen tasoinen tai lähes äidinkielinen sujuvuus, hyvä kielioppi, rekisteri ja sanavalinnat. Erinomainen englannin taito.
  • Tekninen pino: Vahva osaaminen Pythonissa, perinteisessä shell-skriptaamisessa ja datankäsittelyssä.
  • Työnkulku: Laaja kokemus terminaali-/CLI-pohjaisista kehitystyönkuluista ja perehtyneisyys koodausagentteihin.
  • Alaosaaminen: Syvällinen ymmärrys monikielisistä tekstinkäsittelyvaarojen välttämisestä, mukaan lukien: koodaus/merkkien normalisointi; Lokalisoitujen käytäntöjen (aakkosjärjestys, taulukkolaskenta) tuntemus; Tekstisyöt- ja tulostus, työkaluketjujen yhteensopivuus ja turvalliset merkkijonot; (tietyt kielet) bidirektionaalinen/RTL-tuki, fonttien varmistus, renderöinti typografia UI:hin tai artefakteihin.

Taidot ja teknologiat

PythonShell-skriptausTietojen käsittely

Rekrytointiprosessi

  1. 1
    Lähetä hakemus englanniksi
  2. 2
    GenAI-arviointi
  3. 3
    Perehdysohjelma ja pääsya sovelluksiin Applied AI -projekteihin
Seen 3 days agoPartial Schema
LILT (Production)-logo
LILT (Production) · 29 avointa tehtävää
Suosituimmat sijainnit: Etätyö - Globaali · 14 · New Delhi, Intia · 4 · Etätyö - Suomi · 2+8 muuta sijaintia
Näytä yritysprofiili
Tämänhetkiset avoimet roolit yrityksessä LILT (Production) JobCrawls-palvelussa
SijaintiAktiiviset ilmoitukset
Etätyö - Globaali14
New Delhi, Intia4
Etätyö - Suomi2
Etätyö - Globaalisti2
Algiers, Algeria1
Warsaw, Puola1
Etä1
Remote1
Etätyö - Saksa1
Etätyö - Norja1
Helsinki, Suomi1
Nykyinen roolien jakauma yrityksessä LILT (Production) JobCrawls-palvelussa
RoolityyppiAktiiviset ilmoitukset
AI Training Contributor3
Projektipäällikkö1
Subject Matter Expert1
Projektkoordinaattori1
Aiheen asiantuntija1
Asiantuntija1
Pelisprojektikoordinaattori1
Asiantuntija luonnontieteissä1
Matematiikan asiantuntija1
Asiantuntija – rahoitus1
Robotiikan asiantuntija1
Aineen asiantuntija1
Voice Talent1
Medical Translator1
Aihetta koskeva asiantuntija1
Aihealueen asiantuntija1
Kielenkääntäjä1
Kielitieteilijä1
Nykyinen roolitasojen jakauma yrityksessä LILT (Production) JobCrawls-palvelussa
RoolitasoAktiiviset ilmoitukset
Senior-taso9
Keskitaso5
Harjoittelija4
Asiantuntija2

Auta meitä parantamaan JobCrawlsia — kirjaudu sisään synkronoidaksesi tallennetut työpaikat laitteiden välillä, tai lähetä palautetta milloin tahansa.