Data-automaatioinsinööri
Julkaistu 22.9. (25 päivää sitten) · Päivitetty 16.10.
Tärkeimmät tiedot
Data-automaatioinsinööri Banha, Egypti; rakenna automatisoituja dataputkia.
Missä ja miten
- Ala
- Teknologia
- Kielitaito
- Englanti
- Työkokemus
- vähintään 1 vuoden kokemus
Alkuperäinen ilmoitus
JobCrawls on kääntänyt tämän englanninkielisestä ilmoituksesta.
Rooli:
Data-automaatioinsinööri
Kuvaus:
Data-automaatioinsinöörinä toimit avainroolissa kehittääksesi ja ylläpitääksesi automatisoituja data-prosessijärjestelmiä. Teet tiivistä yhteistyötä data-analyytikkojen ja muiden sidosryhmien kanssa suunnitellaksesi, toteuttaaksesi ja optimoidaksesi dataputkistoja varmistaen datan sujuvan ja tarkan kulun organisaatiossa.
Tehtävät:
- Kehitä ja toteuta automatisoituja dataputkia rakenteellisen ja epästrukturoidun datan keräämiseen, käsittelyyn ja tallentamiseen.
- Integroi dataa useista lähteistä sekä reaaliaikaisesti että eräajoina ja suorita muunnoksia johdonmukaisuuden, tarkkuuden ja luotettavuuden varmistamiseksi.
- Toteuta datalaadun tarkastuksia ja monitorointimekanismeja ongelmien ennaltaehkäisevään havaitsemiseen.
- Kirjoita koodia ja skriptejä dataprosessien automatisointiin käyttäen kieliä kuten Python, Shell tai vastaavia.
- Hyödynnä ETL-työkaluja ja kehyksiä (Apache Spark, AWS Glue) tehokkaaseen datankäsittelyyn.
- Tee yhteistyötä muiden älykkäiden datatiimien kanssa.
- Varmista saumaton dataflow koneoppimisen ja analytiikan sovelluksille.
- Toteuta monitorointijärjestelmiä dataputkien suorituskyvyn seuraamiseksi ja optimointikohteiden tunnistamiseksi.
- Jatka dataprosessien optimointia tehokkuuden ja skaalautuvuuden saavuttamiseksi.
- Dokumentoi dataprosessit, järjestelmäarkkitehtuuri ja koodivarasto tiedonjako ja tulevaa käyttöä varten.
- Pidä dokumentaatio ajan tasalla muutosten tai parannusten yhteydessä data-infrastruktuuriin.
- Ota käyttöön ja noudata tiedon suojaus- ja noudattamisstandardeja.
- Tee yhteistyötä turvallisuustiimien kanssa tiedon suojaamiseksi ja yksityisyyden varmistamiseksi.
Olet sopiva hakija jos:
- 1+ vuoden kokemus data-arkkitehtuurista, automaatiosta tai vastaavalta alalta.
- Vahva ymmärrys dataputkista ja datan elinkaaren hallinnasta.
- Osa Pythonin, Shellin tai vastaavien skriptien käytöstä.
- Kokemus data-automaatio työkaluista (Airflow, Luigi, jne.) plussaa.
- Erinomainen analyyttinen ja ongelmanratkaisukyky.
- Hyvät viestintä- ja yhteistyötaidot tiimien kanssa.
- Tietoja pilviympäristöistä (AWS, Azure, GCP) datan käsittelyssä.
- Tiedot datavarastoinnista ja datalaadun menetelmistä
Sijainti:
EG-Banha, Egypti (EI Corniche Street)
Aikaityp: Täysi työaika
Työkanava: Tietotekniikka
Tehtävästä lyhyesti
JobCrawlsin tiivistys yllä olevasta ilmoituksesta.
Vaatimukset
- 1+ vuoden kokemus data-insinöörityöstä, automatisoinnista tai alaltaan
- Vahva ymmärrys dataputkista ja datan elinkaaren hallinnasta
- Skriptikielten kuten Python, Shell tai vastaavasti
- Kokemus data-automaatio työkaluista (Airflow, Luigi, jne.) plussaa
- Erinomaiset analyyttiset ja ongelmanratkaisutaidot
- Vahvat viestintä- ja yhteistyötaidot tiimien kanssa
- Tietoja pilviympäristöistä (AWS, Azure, GCP) datan käsittelyssä
- Tieto datavarastoinnista ja datalaadun menetelmistä
Tehtävät
- Kehitä ja ota käyttöön automatisoituja dataputkia rakenteellisen ja epästrukturoidun datan keräämiseen, käsittelyyn ja tallentamiseen.
- Integroi dataa useista lähteistä reaaliaikaisesti ja eräajoina sekä suorita muunnoksia johdonmukaisuuden, tarkkuuden ja luotettavuuden varmistamiseksi.
- Toteuta datalaadun tarkastuksia ja monitorointimekanismeja ongelmien ennaltaehkäisyyn.
- Kirjoita koodia ja skriptejä dataprosessien automatisointiin käyttäen kieliä kuten Python, Shell tai vastaavia.
- Hyödynnä ETL-työkaluja ja kehyksiä (Apache Spark, AWS Glue) tehokkaaseen datankäsittelyyn.
- Tee yhteistyötä muiden data- Tiimien kanssa.
- Varmista saumaton dataflöydi koneoppimisen ja analytiikan sovelluksille.
- Toteuta monitorointijärjestelmiä dataputkien suorituskyvyn seuraamiseksi ja optimoimiseksi.
- Jatka dataprosessien optimointia tehokkuuden ja skaalautuvuuden saavuttamiseksi.
- Dokumentoi dataprosessit, järjestelmäarkkitehtuuri ja koodivarasto tiedonjako ja tulevia käyttötarkoituksia varten.
- Pidä dokumentaatio ajan tasalla data-infrastruktuurin muutoksista.
- Toteuta ja noudata tietosuoja- ja noudattamisstandardeja.
- Tee yhteistyötä turvallisuustiimien kanssa datan suojaamiseksi ja yksityisyyden varmistamiseksi.
Osaaminen ja teknologiat
PythonShellScalaJavaJavaApache SparkAWS GlueAirflowLuigiETLDataputketTietovarastointi
CV:si ja tämä työpaikka
Miten hyvin CV:si sopii tähän paikkaan?
Lisää CV:si kerran, niin näet jokaisesta työpaikasta, mitkä vaaditut taidot sinulla on, mitkä puuttuvat ja riittääkö kielitaitosi. Ilmainen, eikä tiliä tarvita.
Lisää CVEi vielä CV:tä? Aloita pohjasta: ilmainen CV-pohja. Hakemus työn alla? Hakemuskirjeen pohja ja esimerkit.
Arrow Finland Oy työnantajana
Talous
€59.2M
Liikevaihto
€3.2M
Voitto
5.0%
Voittomarginaali
Arrow FinlandOy
Yleisimmät paikkakunnat (kaikki ilmoitukset): Espoo, Suomi · 5 · Etätyö - Suomi · 4 · Etätyö - Norja · 2 · +13 muuta paikkakuntaa
| Paikkakunta | Aktiiviset ilmoitukset |
|---|---|
| Espoo, Suomi | 5 |
| Etätyö - Suomi | 4 |
| Etätyö - Norja | 2 |
| Etätyö - Puola | 2 |
| Etätyö - Unkari | 2 |
| Etätyö - Ruotsi | 2 |
| Etätyö - Tanska | 2 |
| Etätyö - Globaali | 1 |
| Etätyö - Ranska | 1 |
| Etätyö - Portugali | 1 |
| Etätyö - Iso-Britannia | 1 |
| Etätyö - Irlanti | 1 |
| Etätyö - Yhdistynyt kuningaskunta | 1 |
| Nederlands, Remote | 1 |
| Etätyö - Espanja | 1 |
| Etätyö - Tšekki | 1 |
| Tehtävä | Aktiiviset ilmoitukset |
|---|---|
| Liiketoiminnan kehitysjohtaja | 2 |
| Partnerin kehitysjohtaja | 1 |
| EMEA RedHat ISV/CCSP liiketoiminnan kehitysjohtaja | 1 |
| Tekninen Presales | 1 |
| Tekninen myyntipäällikkö | 1 |
| Supply Chain Services Manager | 1 |
| Myynti-insinööri | 1 |
| Partner Development Manager | 1 |
| Microsoftin tekoälyinsinööri | 1 |
| Vaativuustaso | Aktiiviset ilmoitukset |
|---|---|
| Esimies | 5 |
| Senior-taso | 3 |
| Juniori | 1 |
| Keskitaso | 1 |