Data Scientist

Cognizant (NASDAQ: CTSH) är en ledande leverantör av informationsteknik, konsulttjänster och affärsprocesser som hjälper världens ledande företag bygga starkare affärer. Cognizant är baserat i Teaneck, New Jersey (USA) och kombinerar engagemang för kundnöjdhet, teknologisk innovation, djup bransch- och affärsprocesskompetens och en globalt samarbetsinriktad arbetsstyrka som förkroppsligar framtiden för arbete. Våra kulturvärden betonar mångfald och öppenhet, och att merit och prestation är avgörande för framgång. Job Summary: Vi söker en erfaren Agentic AI Evaluation Data Scientist som designar och implementerar utvärderingsramverk för konversationella och autonoma AI-system som stödjer handel och kundorienterade användningsfall. Rollen ansvarar för att bedöma agenters prestanda över uppgiftsslutförande, verktygsanvändningsprecision, multi-turn samstämmighet, rekommendationsrelevans, hallucination och kundupplevelseutfall. Den framgångsrika kandidaten kommer att bygga automatiserade och människa-i-loopen-utvärderingspipelines med Azure AI Foundry, etablera regressions- och red-teaming-praktiker och analysera produktionstrafik för att identifiera kvalitetsförändringar, felmönster, bias och rättvisefrågor. Tillsammans med AI-ingenjörer och lösningsarkitekter kommer rollen att bädda in utvärderingsportar i MLOps och CI/CD-pipelines och tillhandahålla tydliga riskbedömningar för ansvarsfull AI-styrning och releaser. Ansvar: Designa och implementera utvärderingsramverk för agentiska AI-system (konversationella shoppingassistenter, autonoma uppgiftsagenter), inklusive uppgiftssuccésats, verktygsanvändningsprecision och multi-turn-sammanhang. Bygg offline- och online-utvärderingspipelines med Azure AI Foundry-utvärderingsverktyg, kombinera LLM-as-judge-tekniker, människa-i-loopen-översyn och statistisk signifikans-testning. Definiera och följ spårningskvalitetsmått specifika för handel med agenter — relevans för rekommendationer, hallucinationsfrekvens, uppgiftsslutförande, eskalering/överföringsnoggrannhet och kundnöjdhetsindikatorer (CSAT, lösningsandel). Designa red-teaming och motståndstester för att undersöka agentens robusthet mot promptinjektion, jailbreak och edge-case-scenarier inom handel (returer, bedrägeri, prisfel). Utveckla regressions-testsviter för att upptäcka kvalitetsdrift över modellversioner, promptändringar och RAG-databasen. Analysera produktionens agentloggar/telemetri för att identifiera felmönster, bias och rättviseproblem och använd insikterna i promptdesign, finjustering och RAG-återhämtning. Samarbeta med AI-ingenjörer och lösningsarkitekter för att instrumentera agenter för observabilitet (spårning, loggning via Azure Monitor/Application Insights) och definiera utvärderingsportar inom MLOps/CI-CD. Kommunicera utvärderingsfynd och riskbedömningar till tekniska och affärsintressenter och informera om go/no-go-beslut vid agentreleaser och ansvarsfull AI-styrning. Krav: 5–8 års erfarenhet inom data science/ML, med minst 2–3 års fokus på att utvärdera LLM-baserade eller agentiska AI-system i produktion, gärna inom detaljhandel, e-handel eller kundnära konversations-AI. Förmåner: Att gå med Cognizant ger möjlighet att lära och samarbeta med några av branschens mest begåvade personer och följa utvecklingen inom tekniken inom ditt expertisområde. Vi värdesätter våra medarbetares bidrag och erbjuder karriärvägar, utbildning och stöd i din professionella utveckling samt konkurrenskraftig ersättning, förmåner och hälsa. Nästa steg: Kontakta vårt vänliga team idag för att ansöka och visa ditt intresse för denna heltidsroll. Vi hjälper dig att nå dina mål.