Tha sinn uile a ’tuigsinn gu bheil coileanadh modal fiosrachaidh fuadain (AI) gu tur an urra ri càileachd dàta a chaidh a thoirt seachad aig ìre trèanaidh. Ach, mar as trice bidh iad air an deasbad aig ìre uachdar. Tha a ’mhòr-chuid de na goireasan air-loidhne a’ sònrachadh carson a tha togail dàta càileachd deatamach airson na h-ìrean dàta trèanaidh AI agad, ach tha beàrn ann a thaobh eòlas a tha ag eadar-dhealachadh càileachd bho dhàta nach eil gu leòr.
Nuair a nì thu sgrùdadh nas doimhne air seataichean-dàta, chì thu tonnaichean de mhì-mhisneachd agus de mhì-mhisneachd a thathas gu tric a ’dearmad. Tha sinn air co-dhùnadh solas a thoirt air na cuspairean nach eil cho labhairteach. Às deidh dhut an artaigil seo a leughadh, bidh beachd soilleir agad mu chuid de na mearachdan a tha thu a ’dèanamh nuair a bhios tu a’ tional dàta agus cuid de dhòighean anns am b ’urrainn dhut do chàileachd dàta trèanaidh AI a bharrachadh.
Feuch an tòisich sinn.
Anatomy of a AI Project
Airson an neo-aithnichte, tha pròiseact AI no ML (ionnsachadh inneal) gu math eagarach. Tha e sreathach agus tha sruth-obrach cruaidh ann.
Gus eisimpleir a thoirt dhut, seo mar a tha e a ’coimhead ann an seagh gnèitheach:
- Dearbhadh air bun-bheachd
- Dearbhadh modail agus sgòradh modail
- Leasachadh algorithm
- Ullachadh dàta trèanaidh AI
- Modail cleachdadh
- Trèanadh algorithm
- Optimization post-cleachdadh
Tha staitistigean a ’nochdadh gu bheil faisg air 78% de na pròiseactan AI air stad aig aon àm no ann an àite eile mus ruig iad an ìre cleachdadh. Ged a tha beàrnan mòra, mearachdan loidsigeach, no cùisean riaghlaidh phròiseactan air aon taobh, tha mearachdan beaga agus mearachdan ann a dh ’adhbhraicheas briseadh mòr ann am pròiseactan. Anns an dreuchd seo, tha sinn gu bhith a ’sgrùdadh cuid de na subtleties as cumanta.
Claonadh dàta
Is e bias dàta toirt a-steach saor-thoileach no neo-phàirteach de fhactaran no eileamaidean a bhios a ’gluasad gu neo-fhàbharach a dh’ ionnsaigh no an aghaidh builean sònraichte. Gu mì-fhortanach, tha bias na dhragh mòr ann an àite trèanaidh AI.
Ma tha seo a ’faireachdainn toinnte, tuig nach eil inntinn aig siostaman AI dhaibh fhèin. Mar sin, chan eil bun-bheachdan eas-chruthach mar bheusachd, moraltachd agus barrachd ann. Chan eil iad ach cho glic no cho gnìomhach ris na bun-bheachdan loidsigeach, matamataigeach agus staitistigeil a thathas a ’cleachdadh nan dealbhadh. Mar sin, nuair a leasaicheas daoine na trì sin, tha e coltach gum bi cuid de chlaon-bhreith agus fàbhar ann.
Tha bias na bhun-bheachd nach eil ceangailte gu dìreach ri AI ach leis a h-uile càil eile a tha timcheall air. Tha seo a ’ciallachadh gu bheil e a’ tighinn nas motha bho eadar-theachd daonna agus dh ’fhaodadh e a bhith air a thoirt a-steach aig àm sònraichte sam bith. Dh ’fhaodadh seo a bhith nuair a thathas a’ dèiligeadh ri duilgheadas airson fuasglaidhean as coltaiche, nuair a bhios cruinneachadh dàta a ’tachairt, no nuair a bhios an dàta air ullachadh agus air a thoirt a-steach do mhodal AI.
An urrainn dhuinn cuir às do chlaonadh gu tur?
Tha cuir às do chlaonadh iom-fhillte. Chan eil roghainn pearsanta gu tur dubh is geal. Bidh e a ’soirbheachadh air an sgìre ghlas, agus is ann air sgàth sin a tha e umhail cuideachd. Le claonadh, tha e duilich a bhith a ’comharrachadh cothromachd iomlan de sheòrsa sam bith. A bharrachd air an sin, tha claonadh cuideachd duilich aithneachadh no aithneachadh, dìreach nuair a tha an inntinn buailteach gu neo-phàirteach a dh ’ionnsaigh creideasan, stereotypes, no cleachdaidhean sònraichte.
Sin as coireach gu bheil eòlaichean AI ag ullachadh nam modalan aca a ’beachdachadh air claonaidhean a dh’fhaodadh a bhith ann agus gan cuir às tro chumhachan agus cho-theacsan. Ma thèid a dhèanamh ceart, faodar skewing toraidhean a chumail aig an ìre as ìsle.
Càileachd Dàta
Tha càileachd dàta gu math gnèitheach, ach nuair a choimheadas tu nas doimhne, gheibh thu grunn shreathan adhartach. Faodaidh na leanas a bhith ann an càileachd dàta:
- Dìth cothrom air meud dàta a chaidh a thomhas
- Às-làthaireachd dàta buntainneach agus co-theacsail
- Às-làthaireachd dàta o chionn ghoirid no ùrachadh
- Am pailteas dàta nach gabh a chleachdadh
- Dìth seòrsa dàta riatanach - mar eisimpleir, teacsa an àite ìomhaighean agus claisneachd an àite bhideothan agus barrachd
- Bias
- Clàsan a tha a ’cuingealachadh eadar-obrachadh dàta
- Dàta le droch notaichean
- Seòrsachadh dàta neo-iomchaidh
Tha faisg air 96% de eòlaichean AI a ’strì ri cùisean càileachd dàta a’ leantainn gu uairean a bharrachd de bhith a ’dèanamh an càileachd as fheàrr gus an urrainn dha innealan na toraidhean as fheàrr a lìbhrigeadh gu h-èifeachdach.
Dàta neo-structaraichte
Bidh luchd-saidheans dàta agus eòlaichean AI ag obair barrachd air dàta neo-structaraichte na an co-aoisean coileanta. Mar thoradh air an sin, thathas a ’caitheamh mòran den ùine aca a’ dèanamh ciall de dhàta neo-structaraichte agus ga chur ri chèile ann an cruth a thuigeas innealan.
Is e dàta neo-structaraichte fiosrachadh sam bith nach eil a rèir cruth, modail no structar sònraichte. Tha e mì-rianail agus air thuaiream. Dh ’fhaodadh dàta neo-structaraichte a bhith bhidio, claisneachd, ìomhaighean, ìomhaighean le teacsa, sgrùdaidhean, aithisgean, taisbeanaidhean, meòrachain, no seòrsachan fiosrachaidh eile. Feumaidh na seallaidhean as buntainniche bho stòran-dàta neo-structaraichte a bhith air an comharrachadh agus air an comharrachadh le làimh le eòlaiche. Nuair a tha thu ag obair le dàta neo-structaraichte, tha dà roghainn agad:
- Bidh thu a ’caitheamh barrachd ùine a’ glanadh an dàta
- Gabh ri toraidhean skewed
Dìth SMEan airson mothachadh dàta earbsach
De na factaran air an do rinn sinn deasbad an-diugh, is e mothachadh dàta earbsach an aon fho-smachd air a bheil smachd mòr againn. Tha mothachadh dàta na cheum deatamach ann an leasachadh AI a tha a ’dearbhadh dè agus ciamar a bu chòir dhaibh ionnsachadh. Dh ’fhaodadh dàta le droch no ceàrr le notaichean na toraidhean agad a sheachnadh gu tur. Aig an aon àm, dh ’fhaodadh dàta le notaichean mionaideach do shiostaman a dhèanamh creidsinneach agus obrachail.
Sin as coireach gum bu chòir mothachadh dàta a bhith air a dhèanamh le SMEn agus seann-shaighdearan aig a bheil eòlas fearainn. Mar eisimpleir, bu chòir dàta cùram slàinte a bhith air a chomharrachadh le proifeiseantaich aig a bheil eòlas air a bhith ag obair le dàta bhon roinn sin. Mar sin, nuair a thèid am modail a chleachdadh ann an suidheachadh a shàbhalas beatha, bidh e a ’coileanadh a rèir na bha dùil. Tha an aon rud fìor airson toraidhean ann am fìor thogalaichean, e-mhalairt fintech, agus àiteachan sònraichte eile.
A 'còmhdach suas
Tha na factaran sin uile a ’comharrachadh aon taobh - chan eil e ciallach a dhol an sàs ann an leasachadh AI mar aonad leis fhèin. An àite sin, is e pròiseas co-obrachail a th ’ann, far am feum thu eòlaichean bho gach raon a thighinn còmhla gus an aon fhuasgladh foirfe sin a sgaoileadh.
Sin as coireach gu bheil sinn a ’moladh fios a chuir thugainn dàta chruinneachadh agus mothachadh eòlaichean mar Shaip gus do thoraidhean agus fuasglaidhean a dhèanamh nas gnìomhaiche. Tha sinn mothachail air na subtleties a tha an sàs ann an leasachadh AI agus tha protocolaidhean mothachail agus sgrùdaidhean càileachd againn gus cuir às dhaibh sa bhad.
faigh in beantuinn còmhla rinn gus faighinn a-mach mar as urrainn don eòlas againn do leasachadh toraidh AI a chuideachadh.
