Mun gervigreind koma í stað gagnaverkfræðinga?

Mun gervigreind koma í stað gagnaverkfræðinga?

Stutt svar: Gervigreind mun ekki koma í stað gagnaverkfræðinga í einu og öllu; hún mun gera endurtekið starf eins og SQL-drög, uppbyggingu verkefna, prófana og skjölunar sjálfvirkt. Ef hlutverk þitt felst að mestu leyti í vinnu þar sem lítið er um að ræða og miða er það meira áberandi; ef þú hefur yfirumsjón með áreiðanleika, skilgreiningum, stjórnun og viðbrögðum við atvikum, þá gerir gervigreind þig aðallega hraðari.

Lykilatriði:

Eignarhald : Forgangsraða ábyrgð á árangri, ekki bara að framleiða kóða hratt.

Gæði : Smíða prófanir, athuganleika og samninga svo að leiðslur séu áfram traustar.

Stjórnun : Haltu friðhelgi einkalífs, aðgangsstýringu, varðveislu og endurskoðunarslóðum í eigu manna.

Viðnám gegn misnotkun : Meðhöndlið úttak gervigreindar sem drög; farið yfir þau til að forðast að þau séu örugg um að þau séu ekki rétt.

Hlutverkabreyting : Eyddu minni tíma í að skrifa hefðbundnar reglur og meiri tíma í að hanna endingargóð kerfi.

Mun gervigreind koma í stað gagnaverkfræðinga? Upplýsingamynd

Ef þú hefur eytt meira en fimm mínútum með gagnateymum, þá hefurðu heyrt viðlagið - stundum hvíslað, stundum kastað út á fundi eins og óvænt atvik: Mun gervigreind koma í stað gagnaverkfræðinga?

Og ... ég skil það. Gervigreind getur búið til SQL, smíðað leiðslur, útskýrt staflarakningar, gert drög að dbt líkönum, jafnvel lagt til vöruhúsaskema með óþægilegu öryggi. GitHub Copilot fyrir SQL Um dbt líkön GitHub Copilot
Það er eins og að horfa á lyftara læra að jonglera. Áhrifamikið, örlítið ógnvekjandi, og þú ert ekki alveg viss um hvað það þýðir fyrir vinnuna þína 😅

En sannleikurinn er ekki eins snyrtilegur og fyrirsögnin. Gervigreind er að gjörbreyta gagnaverkfræði. Hún er að sjálfvirknivæða leiðinlegu, endurteknu atriðin. Hún er að flýta fyrir „ég veit hvað ég vil en man ekki setningafræðina“ augnablikunum. Hún er líka að ala á glænýjum gerðum af ringulreið.

Svo skulum við leggja þetta rétt fram, án handabylgjandi bjartsýni eða örvæntingarfullrar yfirvofandi örvæntingar.

Greinar sem þú gætir viljað lesa eftir þessa:

🔗 Mun gervigreind koma í stað geislafræðinga?
Hvernig gervigreind í myndgreiningu breytir vinnuflæði, nákvæmni og framtíðarhlutverkum.

🔗 Mun gervigreind koma í stað bókhaldara?
Sjáðu hvaða bókhaldsverkefni gervigreind sjálfvirknivæðir og hvað er áfram mannlegt.

🔗 Mun gervigreind koma í stað fjárfestingarbanka?
Skilja áhrif gervigreindar á samninga, rannsóknir og viðskiptasambönd.

🔗 Mun gervigreind koma í stað tryggingamiðlara?
Lærðu hvernig gervigreind umbreytir vátryggingarþjónustu, sölu og þjónustu við viðskiptavini.


Af hverju spurningin „gervigreind kemur í stað gagnaverkfræðinga“ heldur áfram að koma upp aftur 😬

Óttinn kemur frá mjög ákveðnum stað: gagnaverkfræði hefur mikið endurtekið verk .

  • Að skrifa og endurskipuleggja SQL

  • Að smíða inntökuforskriftir

  • Varpunarreitir úr einu skema yfir í annað

  • Að búa til prófanir og grunngögn

  • Villuleit í leiðslubilunum sem eru ... nokkuð fyrirsjáanlegar

Gervigreind er óvenju góð í endurtekningarhæfum mynstrum. Og hluti af gagnaverkfræði snýst einmitt um það - mynstur staflað ofan á mynstur. Tillögur að kóða fyrir GitHub Copilot

Einnig er vistkerfi verkfæranna þegar að „fela“ flækjustig:

Þegar gervigreind birtist getur það fundist eins og síðasti hlutinn. Ef staflinn er þegar abstraktaður og gervigreind getur skrifað límkóðann ... hvað er þá eftir? 🤷

En hér er það sem fólk sleppir: gagnaverkfræði snýst ekki aðallega um vélritun . Vélritun er auðveldi hlutinn. Erfiði hlutinn er að láta óskýran, pólitískan, breytilegan viðskiptaveruleika hegða sér eins og áreiðanlegt kerfi.

Og gervigreind á enn í erfiðleikum með þetta myrkur. Fólk á líka í erfiðleikum - það er bara betra að spuna betur.


Það sem gagnaverkfræðingar gera í raun allan daginn (hinn ótrúverðugi sannleikur) 🧱

Verum nú hreinskilin - starfsheitið „gagnaverkfræðingur“ hljómar eins og þú sért að smíða eldflaugarvélar úr hreinni stærðfræði. Í reynd ertu að byggja upp traust .

Dæmigerður dagur snýst minna um að „finna upp nýjar reiknirit“ og meira um:

  • Samningaviðræður við teymi í uppstreymi um skilgreiningar gagna (sársaukafullt en nauðsynlegt)

  • Að rannsaka hvers vegna mælikvarði breyttist (og hvort hann sé raunverulegur)

  • Meðhöndlun á skemadrifti og óvæntum uppákomum þar sem „einhver bætti við dálki um miðnætti“

  • Að tryggja að leiðslur séu óvirkar, endurheimtanlegar og sýnilegar

  • Að búa til varnarveggi svo að sérfræðingar sem vinna eftir niðurstöðum búi ekki til óviljandi mælaborð

  • Að stjórna kostnaði svo vöruhúsið þitt breytist ekki í peningabál 🔥

  • Aðgangsöryggi, endurskoðun, reglufylgni, varðveislureglur GDPR-reglur (framkvæmdastjórn Evrópusambandsins) Geymslutakmarkanir (ICO)

  • Að smíða gagnavörur sem fólk getur notað án þess að senda þér einkaskilaboð, 20 spurningar

Stór hluti starfsins er félagslegur og rekstrarlegur:

  • „Hver ​​á þetta borð?“

  • „Er þessi skilgreining enn í gildi?“

  • „Hvers vegna flytur CRM út afrit?“

  • „Getum við miðlað þessari mælikvarða til stjórnenda án þess að það komi til vandræða?“ 😭

Gervigreind getur vissulega hjálpað til við hluta af þessu. En að skipta henni alveg út er ... erfitt.


Hvað gerir gagnaverkfræðistarf að sterkri útgáfu? ✅

Þessi hluti skiptir máli vegna þess að í umræðum um afleysingar er yfirleitt gert ráð fyrir að gagnaverkfræðingar séu aðallega „leiðslusmiðir“. Það er eins og að gera ráð fyrir að matreiðslumenn „saxi aðallega grænmeti“. Það er hluti af starfinu, en það er ekki starfið.

Sterk útgáfa af gagnaverkfræðingi þýðir venjulega að viðkomandi getur gert flest af þessu:

  • Hönnun fyrir breytingar
    . Gögn breytast. Teymi breytast. Verkfæri breytast. Góður verkfræðingur smíðar kerfi sem hrynja ekki í hvert skipti sem veruleikinn hnerrar 🤧

  • Skilgreina samninga og væntingar
    Hvað þýðir „viðskiptavinur“? Hvað þýðir „virkur“? Hvað gerist þegar röð berst seint? Samningar koma í veg fyrir ringulreið frekar en fínn kóði. Opinn gagnasamningsstaðall (ODCS) ODCS (GitHub)

  • Byggðu athuganleika inn í allt.
    Ekki bara „virkaði það“ heldur „virkaði það rétt.“ Ferskleiki, rúmmálsfrávik, núllsprengingar, dreifingarbreytingar. Gagnatakanleiki (Dynatrace) Hvað er gagnatakanleiki?

  • Gerðu málamiðlanir eins og fullorðinn einstaklingur:
    Hraði vs. réttleiki, kostnaður vs. seinkun, sveigjanleiki vs. einfaldleiki. Það er engin fullkomin leiðsla, aðeins leiðslur sem þú getur lifað með.

  • Þýða viðskiptaþarfir í endingargóð kerfi
    Fólk biður um mælikvarða en það sem það þarfnast er gagnaafurð. Gervigreind getur samið kóðann en hún getur ekki með töfrum vitað hverjar hindranir fyrirtækisins eru.

  • Halda gögnum leyndum.
    Mesta hrósið fyrir gagnavettvang er að enginn talar um það. Gögn sem ekki gerast eru góð gögn. Eins og pípulagnir. Þú tekur aðeins eftir því þegar þau bila 🚽

Ef þú ert að gera þetta, þá byrjar spurningin „Mun gervigreind koma í stað gagnaverkfræðinga?“ að hljóma ... svolítið óraunhæf. Gervigreind getur komið í stað verkefna , ekki eignarhalds .


Þar sem gervigreind er nú þegar að hjálpa gagnaverkfræðingum (og það er sannarlega frábært) 🤖✨

Gervigreind er ekki bara markaðssetning. Ef hún er notuð vel er hún lögmætur kraftmargföldunarþáttur.

1) Hraðari SQL og umbreytingarvinna

  • Að teikna flóknar samtengingar

  • Að skrifa gluggaföll sem þú vilt frekar ekki hugsa um

  • Að breyta rökfræði úr einföldu máli í fyrirspurnargrindur

  • Endurgerð ljótra fyrirspurna í læsileg CTEs GitHub Copilot fyrir SQL

Þetta er gríðarlega mikilvægt því það dregur úr „auða síðu“-áhrifunum. Þú þarft samt að sannreyna, en þú byrjar á 70% í stað 0%.

2) Villuleit og rótarorsök brauðmylsna

Gervigreind er sæmileg í:

  • Útskýring á villuboðum

  • Að benda á hvar á að leita

  • Mæli með skrefunum „athugaðu hvort skema misræmi sé“ á GitHub Copilot.
    Það er eins og að hafa óþreytandi yngri verkfræðing sem sefur aldrei og stundum lýgur af öryggi 😅

3) Skjalavinnsla og auðgun gagnaskrár

Sjálfvirkt myndað:

  • Lýsingar á dálkum

  • Yfirlit yfir líkan

  • Útskýringar á ætterni

  • „Til hvers er þessi tafla notuð?“ drög að DBT skjölum

Það er ekki fullkomið, en það brýtur bölvunina af óskráðum leiðslum.

4) Prófun á vinnupalli og eftirlit

Gervigreind getur lagt til:

Aftur - þú ákveður samt hvað skiptir máli, en það flýtir fyrir venjubundnum hlutum.

5) Límkóði fyrir leiðslur

Stillingarsniðmát, YAML-grindur, drög að útfærslu á DAG. Þetta er endurtekið og gervigreind borðar endurtekið í morgunmat 🥣 Apache Airflow DAGs


Þar sem gervigreind á enn í erfiðleikum (og þetta er kjarninn í því) 🧠🧩

Þetta er sá hluti sem skiptir mestu máli, því hann svarar spurningunni um skiptingu með raunverulegri áferð.

1) Óljósar skilgreiningar og breytingar

Viðskiptarökfræði er sjaldan skýr. Fólk skiptir um skoðun mitt í setningu. „Virkur notandi“ verður að „virkum greiðandi notanda“ verður að „virkum greiðandi notanda án endurgreiðslna nema stundum“ ... þú veist hvernig það er.

Gervigreind getur ekki ráðið við þessa tvíræðni. Hún getur aðeins giskað.

2) Ábyrgð og áhætta

Þegar leiðsla bilar og stjórnborðið sýnir bull, þá verður einhver að:

  • flokkun

  • miðla áhrifum

  • laga það

  • koma í veg fyrir endurkomu

  • skrifa krufninguna

  • ákveða hvort fyrirtækið geti enn treyst tölum síðustu viku

Gervigreind getur aðstoðað, en hún getur ekki verið ábyrg á marktækan hátt. Fyrirtæki starfa ekki á strauma - þau starfa á ábyrgð.

3) Kerfishugsun

Gagnapallar eru vistkerfi: inntaka, geymsla, umbreytingar, skipulagning, stjórnun, kostnaðarstýring, þjónustusamningar. Breyting á einu lagi hefur áhrif. Hugtök Apache Airflow

Gervigreind getur lagt til staðbundnar hagræðingar sem skapa alþjóðlegt vandamál. Það er eins og að laga íkandi hurð með því að fjarlægja hana 😬

4) Öryggi, friðhelgi einkalífs, reglufylgni

Þetta er þar sem fantasíur um skipti deyja.

Gervigreind getur samið stefnur, en að framkvæma þær á öruggan hátt er raunveruleg verkfræði.

5) „Óþekkt óþekkt“

Gagnaatvik eru oft ófyrirsjáanleg:

  • Söluaðilaforritaskil breyta merkingarfræði hljóðlega

  • Tímabeltisforsenda snýst við

  • Bakfylling afritar skipting

  • Endurtekningaraðferð veldur tvöföldum skrifum

  • Nýr eiginleiki í vörunni kynnir ný atburðamynstur

Gervigreind er veikari þegar aðstæður eru ekki þekktar.


Samanburðartafla: hvað dregur úr hverju, í reynd 🧾🤔

Hér að neðan er hagnýt sýn. Ekki „verkfæri sem koma í stað fólks“ heldur verkfæri og aðferðir sem fækka ákveðnum verkefnum.

Tól / aðferð Áhorfendur Verðstemning Af hverju það virkar
Samstýringar fyrir gervigreindarkóða (SQL + Python aðstoðarmenn) GitHub Samstýring Verkfræðingar sem skrifa mikið af kóða Ókeypis eða greitt Frábær í uppbyggingu, endurgerðum, setningafræði ... stundum sjálfumglaður á mjög ákveðinn hátt
Stýrð ELT tengi Fivetran Lið þreytt á að byggja upp inntöku Áskrift-y Fjarlægir sársauka við sérsniðna inntöku en brýtur niður á skemmtilega nýja vegu
Gagnamælingarpallar Gagnamælingar (Dynatrace) Allir sem eiga þjónustusamninga Miðlungs til stórfyrirtækja Greinir frávik snemma - eins og reykskynjarar fyrir leiðslur 🔔
Umbreytingarrammar (yfirlýsingarlíkön) dbt Blendingar greiningar + DE Venjulega tól + reikna Gerir rökfræði mátbundna og prófanlega, minna spagettí
Gagnaskrár + merkingarlög dbt merkingarlag Fyrirtæki með ruglingi í mælikvörðum Fer eftir því í reynd Skilgreinir „sannleikann“ einu sinni - dregur úr endalausum umræðum um mælikvarða
Útfærsla með sniðmátum Apache Airflow Lið sem eru með áherslu á vettvang Opið + rekstrarkostnaður Staðlar vinnuflæði; færri snjókorna-DAG
Gervigreindaraðstoðað skjölun DBT skjalagerð Lið sem hata að skrifa skjöl Ódýrt til miðlungs Gerir „nógu góðar“ skjöl svo þekkingin hverfi ekki
Sjálfvirkar stjórnunarreglur NIST Persónuverndarrammi Eftirlitsbundið umhverfi Enterprise-y Hjálpar til við að framfylgja reglum - en þarf samt sem áður menn til að hanna reglurnar

Takið eftir því sem vantar: röð sem segir „ýtið á hnappinn til að fjarlægja gagnaverkfræðinga“. Já ... sú röð er ekki til 🙃


Svo ... mun gervigreind koma í stað gagnaverkfræðinga, eða bara færa hlutverkið til? 🛠️

Hér er svarið, sem er ekki dramatískt: Gervigreind mun koma í stað hluta af vinnuflæðinu, ekki starfsgreinarinnar.

En það mun endurskipuleggja hlutverkið. Og ef þú hunsar það, þá munt þú finna fyrir þrýstingnum.

Hvað breytist:

  • Minni tími í að skrifa hefðbundnar leiðbeiningar

  • Minni tími í að leita að skjölum

  • Meiri tími til að fara yfir, staðfesta og hanna

  • Meiri tími í að skilgreina samninga og gæðavæntingar í Opnum gagnasamningastaðli (ODCS)

  • Meiri tími í samstarfi við vörur, öryggi og fjármál

Þetta er hin lúmska breyting: gagnaverkfræði snýst minna um að „byggja upp leiðslur“ og meira um að „byggja upp áreiðanlegt gagnaafurðakerfi“

Og í hljóðlátri snúningi, það er meira virði, ekki minna.

Einnig - og ég ætla að segja þetta jafnvel þótt það hljómi dramatískt - gervigreind eykur fjölda fólks sem getur framleitt gagnagripi , sem eykur þörfina fyrir einhvern til að halda öllu gangandi. Meiri afköst þýða meiri möguleika á ruglingi. GitHub Copilot

Þetta er eins og að gefa öllum rafmagnsborvél. Frábært! Nú þarf einhver að framfylgja reglunni „vinsamlegast borið ekki í vatnslögnina“ 🪠


Nýi færnipakkinn sem helst verðmætur (jafnvel með gervigreind alls staðar) 🧠⚙️

Ef þú vilt hagnýtan „framtíðarvænan“ gátlista, þá lítur hann svona út:

Hugsunarháttur kerfishönnunar

  • Gagnalíkön sem lifa af breytingar

  • Málaferli milli hópa og streymis

  • Hugsun um seinkun, kostnað og áreiðanleika

Gagnagæðaverkfræði

Stjórnarhættir og traustarkitektúr

Hugsun á vettvangi

  • Endurnýtanleg sniðmát, gullnar leiðir

  • Staðlað mynstur fyrir inntöku, umbreytingar og prófanir Fivetran dbt gagnaprófum

  • Sjálfsafgreiðsluverkfæri sem bráðna ekki niður

Samskipti (já, í alvöru)

  • Að skrifa skýr skjöl

  • Að samræma skilgreiningar

  • Að segja „nei“ kurteislega en ákveðið

  • Að útskýra málamiðlanir án þess að hljóma eins og vélmenni 🤖

Ef þú getur gert þetta, þá verður spurningin „Mun gervigreind koma í stað gagnaverkfræðinga?“ minna ógnandi. Gervigreind verður ytri stoðgrind þín, ekki staðgengill þinn.


Raunhæfar aðstæður þar sem sum störf í gagnaverkfræði minnka 📉

Ókei, fljótleg raunveruleikaskoðun, því þetta snýst ekki bara um sólskin og emoji-konfetti 🎉

Sum hlutverk eru meira berskjölduð:

  • Eingöngu inntökuhlutverk þar sem allt eru staðlaðar tengingar Fivetran tengingar

  • Teymi sem vinna að mestu leyti endurteknar skýrslur með lágmarks blæbrigðum í sviðinu

  • Fyrirtæki þar sem gagnaverkfræði er meðhöndluð sem „SQL apar“ (hart en satt)

  • Hlutverk með litla eignarhaldsstöðu þar sem starfið er bara miðar og afritun og líming

Gervigreind ásamt stýrðum verkfærum getur dregið úr þessum þörfum.

En jafnvel þar lítur skipti yfirleitt svona út:

  • Færri einstaklingar vinna sömu endurteknu vinnuna

  • Meiri áhersla á eignarhald og áreiðanleika kerfisins

  • Breyting í átt að „einn einstaklingur getur stutt fleiri leiðslur“

Já, starfsmannafjöldi getur breyst. Hlutverk þróast. Titlar breytast. Sá hluti er raunverulegur.

Samt sem áður helst útgáfan af hlutverkinu þar sem mikið eignarhald og mikið traust er í fyrirrúmi.


Lokasamantekt 🧾✅

Mun gervigreind koma í stað gagnaverkfræðinga? Ekki á þann hreina og heildstæða hátt sem fólk ímyndar sér.

Gervigreind mun:

En gagnaverkfræði snýst í grundvallaratriðum um:

Gervigreind getur hjálpað til við það ... en hún „á“ það ekki.

Ef þú ert gagnaverkfræðingur er skrefið einfalt (ekki auðvelt, en samt einfalt):
einbeittu þér að eignarhaldi, gæðum, hugsun á verkvangi og samskiptum. Láttu gervigreind sjá um grunnatriðin á meðan þú sérð um þá þætti sem skipta máli.

Og já - stundum þýðir það að vera fullorðna fólkið í herberginu. Ekki glæsilegt. Þó hljóðlega öflugt 😄

Mun gervigreind koma í stað gagnaverkfræðinga?
Hún mun koma í stað sumra verkefna, stokka upp stigann og gera bestu gagnaverkfræðingana enn verðmætari. Það er hin raunverulega saga.


Algengar spurningar

Mun gervigreind koma alveg í stað gagnaverkfræðinga?

Í flestum fyrirtækjum er líklegra að gervigreind taki yfir ákveðin verkefni heldur en að afskrifa þau alveg. Hún getur flýtt fyrir SQL-drögunum, uppbyggingu gagnaleiða, fyrstu prófunum og gerð grunnprófa. En gagnaverkfræði felur einnig í sér eignarhald og ábyrgð, auk þess að láta óreiðukennda viðskiptaveruleikann haga sér eins og áreiðanlegt kerfi. Þessir hlutar þurfa samt sem áður á fólki að ákveða hvað „rétt“ lítur út og taka ábyrgð þegar eitthvað bilar.

Hvaða hluta gagnaverkfræði er gervigreind þegar að sjálfvirknivæða?

Gervigreind virkar best í endurteknum verkefnum: drögum að og endurskipulagningu SQL, gerð grunnlína fyrir DBT líkan, útskýringum á algengum villum og framleiðslu á skjölun. Hún getur einnig byggt upp prófanir eins og núll- eða einstakleikaprófanir og búið til sniðmát fyrir „límkóða“ fyrir hljómsveitartól. Sigurinn er skriðþunginn - þú byrjar nær virkri lausn - en þú þarft samt að staðfesta réttmæti hennar og tryggja að hún passi við umhverfi þitt.

Ef gervigreind getur skrifað SQL og leiðslur, hvað er þá eftir fyrir gagnaverkfræðinga?

Mikið: að skilgreina gagnasamninga, meðhöndla skemudrift og tryggja að leiðslur séu óáberandi, sjáanlegar og endurheimtanlegar. Gagnaverkfræðingar eyða tíma í að rannsaka breytingar á mælikvörðum, byggja upp öryggislínur fyrir notendur eftir vinnslu og stjórna málamiðlun milli kostnaðar og áreiðanleika. Verkið snýst oft um að byggja upp traust og halda gagnapallinum „rólegum“, sem þýðir nógu stöðugum til að enginn þurfi að hugsa um það dagsdaglega.

Hvernig breytir gervigreind daglegu starfi gagnaverkfræðings?

Það styttir venjulega tímann í að nota grunnforrit og „uppflettingar“, þannig að þú eyðir minni tíma í að skrifa og meiri tíma í að fara yfir, staðfesta og hanna. Þessi breyting færir hlutverkið í átt að því að skilgreina væntingar, gæðastaðla og endurnýtanleg mynstur frekar en að handkóða allt. Í reynd muntu líklega vinna meira í samstarfi við vöru-, öryggis- og fjármáladeildir - vegna þess að tæknileg afköst verða auðveldari í framleiðslu en erfiðari í stjórnun.

Hvers vegna á gervigreind í erfiðleikum með óljósar viðskiptahugmyndir eins og „virkur notandi“?

Vegna þess að viðskiptarökfræði er ekki stöðug eða nákvæm - hún breytist mitt í verkefni og er mismunandi eftir hagsmunaaðilum. Gervigreind getur samið drög að túlkun en hún getur ekki tekið ákvörðunina þegar skilgreiningar þróast eða árekstrar koma upp. Gagnaverkfræði krefst oft samningaviðræðna, skjalfestingar forsendna og umbreytingar óljósra krafna í varanlega samninga. Þessi „mannlega samræmingarvinna“ er ein af meginástæðunum fyrir því að hlutverkið hverfur ekki jafnvel þótt verkfæri batni.

Getur gervigreind séð um gagnastjórnun, friðhelgi einkalífs og reglufylgni á öruggan hátt?

Gervigreind getur hjálpað til við að semja stefnur eða leggja til aðferðir, en örugg innleiðing krefst samt sem áður raunverulegrar verkfræði og vandlegs eftirlits. Stjórnun felur í sér aðgangsstýringu, meðhöndlun persónuupplýsinga, varðveislureglur, endurskoðunarslóðir og stundum búsetutakmarkanir. Þetta eru áhættusvið þar sem „næstum því rétt“ er ekki ásættanlegt. Menn verða að hanna reglurnar, staðfesta framfylgd og bera ábyrgð á árangri í reglufylgni.

Hvaða færni helst verðmæt fyrir gagnaverkfræðinga þegar gervigreind batnar?

Hæfni sem gerir kerfi seigluleg: hugsun í kerfishönnun, gagnagæðaverkfræði og stöðlun með áherslu á kerfi. Samningar, fylgjastnleiki, viðbrögð við atvikum og agað rótargreining verða enn mikilvægari þegar fleiri geta búið til gagnabrot fljótt. Samskipti verða einnig aðgreinandi þáttur - að samræma skilgreiningar, skrifa skýr skjöl og útskýra málamiðlanir án dramatíkur er stór þáttur í að halda gögnum traustum.

Hvaða gagnaverkfræðistörf eru í mestri hættu vegna gervigreindar og stýrðra verkfæra?

Hlutverk sem einblína þröngt á endurtekna inntöku eða staðlaðar skýrslugerðarleiðslur eru berskjaldaðri, sérstaklega þegar stýrð ELT-tengingar ná yfir flestar heimildir. Vinna með lágt eignarhald og miðastýrt verkefni getur minnkað vegna þess að gervigreind og abstrakt efni draga úr fyrirhöfn á hverri leiðslu. En þetta lítur venjulega út fyrir að færri vinni endurtekin verkefni, ekki „engir gagnaverkfræðingar“. Hlutverk með hátt eignarhald sem einblína á áreiðanleika, gæði og traust eru áfram varanleg.

Hvernig ætti ég að nota verkfæri eins og GitHub Copilot eða dbt með gervigreind án þess að skapa ringulreið?

Meðhöndlið úttak gervigreindar sem drög, ekki ákvörðun. Notið það til að búa til fyrirspurnargrindur, bæta lesanleika eða byggja upp DBT prófanir og skjöl, og sannreynið síðan gegn raunverulegum gögnum og jaðartilvikum. Paraðu það við sterkar venjur: samninga, nafngiftarstaðla, athuganir á athugunarhæfni og endurskoðunarvenjur. Markmiðið er hraðari afhending án þess að fórna áreiðanleika, kostnaðarstýringu eða stjórnarháttum.

Heimildir

  1. Framkvæmdastjórn Evrópusambandsins - Útskýring á gagnavernd: Meginreglur GDPR - commission.europa.eu

  2. Upplýsingafulltrúi (ICO) - Geymslutakmarkanir - ico.org.uk

  3. Framkvæmdastjórn Evrópusambandsins - Hversu lengi má geyma gögn og er nauðsynlegt að uppfæra þau? - commission.europa.eu

  4. Þjóðstofnun staðla og tækni (NIST) - Persónuverndarrammi - nist.gov

  5. Tölvuöryggismiðstöð NIST (CSRC) - SP 800-92: Leiðbeiningar um stjórnun tölvuöryggisskráa - csrc.nist.gov

  6. Öryggismiðstöð netsins (CIS) - Stjórnun endurskoðunarskrár (CIS stýringar) - cisecurity.org

  7. Skjölun Snowflake - Reglur um aðgang að röðum - docs.snowflake.com

  8. Google Cloud skjölun - Öryggi á röðum í BigQuery - docs.cloud.google.com

  9. BITOL - Staðall um opna gagnasamninga (ODCS) v3.1.0 - bitol-io.github.io

  10. BITOL (GitHub) - Samningsstaðall fyrir opna gagnagrunna - github.com

  11. Apache Airflow - Skjölun (stöðug) - airflow.apache.org

  12. Apache Airflow - DAGs (kjarnahugtök) - airflow.apache.org

  13. Gögn um dbt rannsóknarstofur - Hvað er dbt? - docs.getdbt.com

  14. Gögn um dbt Labs - Um dbt líkön - docs.getdbt.com

  15. Gögn um dbt Labs - Gögn - docs.getdbt.com

  16. Gögn frá dbt Labs - Gagnaprófanir - docs.getdbt.com

  17. Skjölun dbt Labs - Merkingarlag dbt - docs.getdbt.com

  18. Fivetran skjöl - Að byrja - fivetran.com

  19. Fivetran - Tengi - fivetran.com

  20. AWS skjölun - Leiðbeiningar fyrir AWS Lambda forritara - docs.aws.amazon.com

  21. GitHub - GitHub Copilot - github.com

  22. GitHub skjöl - Að fá tillögur að kóða í IDE með GitHub Copilot - docs.github.com

  23. Microsoft Learn - GitHub Copilot fyrir SQL (VS Code viðbót) - learn.microsoft.com

  24. Dynatrace skjölun - Gagnamælingarhæfni - docs.dynatrace.com

  25. DataGalaxy - Hvað er gagnamælanleiki? - datagalaxy.com

  26. Gögn um Great Expectations - Yfirlit yfir væntingar - docs.greatexpectations.io

Finndu nýjustu gervigreindina í opinberu versluninni fyrir gervigreindaraðstoðarmenn

Um okkur

Til baka á bloggið