NExT-GPT: MFUMO WA LUGHA WA AKILI BANDIA UNAOKUPA MAJIBU KWA MAANDISHI, PICHA, SAUTI NA PICHA MJONGEO

Written by -
Picha hii imetengenezwa kwa Akili Bandia na Decrypt.
Katika uwanda mpana wa teknolojia unaotawaliwa na makampuni makubwa kama OpenAI na Google, NExT-GPT ambao ni mfumo huria wa lugha pana ya Akili Bandia (AI) [Large Language M odel (LLM)] unaweza kuwa na kile kinachohitajika ili kushindana na miamba hii miwili katika teknolojia.

ChatGPT imeusisimua ulimwengu kwa uwezo wake wa kuelewa maswali katika lugha asilia na kutoa majibu kama ya binadamu. Lakini wakati Akili Bandia inaendelea kusonga mbele kwa kasi ya umeme, watu wametaka kuwepo na maendeleo zaidi. Zama za maandishi pekee zimekwisha sasa mifumo ya lugha ya Akili Bandia imeanza kuwa mingi kuleta ushindani.

NExT-GPT imetengenezwa kwa ushirikiano kati ya Chuo Kikuu cha taifa cha Singapore (NUS) na Chuo Kikuu cha Tsinghua. Inaweza kuchakata na kutoa majibu kwa kuchanganya maandishi, picha, sauti na picha mjongeo (video). Hii inaruhusu majibizano ya asili zaidi kuliko miundo ya maandishi pekee kama ilivyo kwenye ChatGPT.

Timu iliyoiunda inabainisha NExT-GPT kama mfumo wa "yoyote-kwa-yoyote" (any-to-any system) kumaanisha kuwa inaweza kukubali maswali kwa njia yoyote kati ya picha, sauti, maandishi na video na kutoa majibu kwa namna inayofaa. Tazama video hapa chini:

Maendeleo ya teknolojia yanatokea kwa haraka. Kama muundo wa chanzo huria (open source), NExT-GPT inaweza kuboreshwa na watumiaji ili kukidhi mahitaji yao mahususi. Hii inaweza kupelekea maboresho makubwa zaidi ya mfumo wa awali, kama yaliyotokea katika chanzo huria cha Stable Diffusion na toleo lake la awali. Uhuru wa kuboresha kifaa hiki huwaruhusu wagunduzi kukiboresha kwa ufanisi zaidi.

Kwa hivyo NExT-GPT inafanyaje kazi?

Kama ilivyoelezwa katika matokeo ya utafiti, mfumo huu una miundo tofauti ya kutafsiri maingizo kama vile picha na sauti katika maandishi ambapo muundo wa lugha msingi unaweza kuchakata. Yani unaweza kuweka picha na kuuliza kuhusu picha hiyo na mfumo ukakupa majibu. Mathalani, unaweza kuweka picha yako katika mfumo na kuuliza kuhusu picha hiyo na mfumo ukakujibu.

Watafiti walianzisha mbinu inayoitwa "utaratibu wa kubadili maagizo" (modality-switching instruction tuning) kuboresha uwezo wa kuchanganua, hii namna ambayo mfumo unachakata aina tofauti za maingizo kama muundo mmoja madhubuti. Uboreshaji huu unaifanya NExT-GPT kubadili kwa urahisi namna ya kuchakata taarifa anazotafuta mtumiaji wakati wa mazungumzo.

Ili kushughulikia ingizo linatafutwa NExT-GPT hutumia tokeni za kipekee kama vile kwa picha, kwa sauti na kwa video. Kila aina ya ingizo hubadilishwa kuwa upachikaji ambao muundo wa lugha unauelewa. Kisha muundo wa lugha unaweza kutoa majibu ya maandishi pamoja na ishara maalum za kuanzisha utoaji wa majibu katika mbinu nyingine.

Mfumo wa kutoa majibu kwa nyia ya video huelekeza video kutolewa. Utumiaji wa mfumo wa tokeni zilizolengwa kwa kila muundo wa ingizo na utoaji huruhusu ubadilishaji wowote.

Muundo wa lugha kisha hutoa tokeni maalum ili kuashiria wakati matokeo yasiyo ya maandishi kama vile picha yanapaswa kuzalishwa. Ving'amuzi tofauti huunda matokeo kwa namna tofauti: Stable Diffusion kama  kifaa cha kutengeneza picha, AudioLDM kama kifaa cha kutengeneza sauti, na Zeroscope kama kitengeneza video. Pia hutumia Vicuna kama LLM msingi na ImageBind kutafsiri kinachotafutwa.

Kimsingi NExT-GPT ni mfumo wa lugha unaounganisha uwezo wa mifumo tofauti ya Akili Bandia ili kuwa kuwa na mfumo moja wa lugha wenye kila kitu (all-in-one super AI). Badala ya kutumia mfumo wa picha pekee, video pekee ama maandishi pekee mtumiaji atatumia NExT-GPT kukamilisha utafutaji wake iwe kwa picha, maandishi, sauti ama picha mjongeo (video)

NExT-GPT inafanikisha urahisishaji huu wa "yoyote-kwa-yoyote" huku ikifunza1% tu ya vigezo vya jumla vya utafutaji (searching). Vigezo vingine vya utafutaji havibadiliki (frozen parameters). Mfumo huu umepata sifa kutoka kwa watafiti kwa namna ulivyofunzwa.

Tovuti ya majaribio imeanzishwa ili kuruhusu watu kufanya majaribio ya NExT-GPT lakini bado majaribio yanapatikana kwa nyakati tofauti. Kuifikia tovuti hiyo bofya hapa 👉🏿 NExT-GPT DEMO SITE.

Huku makampuni makubwa ya kiteknolojia kama Google na OpenAI wakizindua mifumo yao ya aina hii, NExT-GPT inakua ni mfumo huria mbadala kwa wagunduzi kuuendeleza. Mifumo hii yenye kufanya mambo yote ni muhimu kwa mwingiliano na watumiaji. Na kwa kutumia NExT-GPT kutengeneza mfumo mwingine wa namna hii, watafiti wanatoa chachu kwa jamii kuiendeleza Akili Bandia kufikia hatua bora zaidi. 

Makala hii imeandikwa na Jose Antonio Lanz kwenye Decrypt na kusimuliwa kwa Kiswahili na Venance Gilbert.
Septemba 28, 2023.

Comments

Post a Comment

Popular Posts

CHEKI PICHA HIZI ALIZOWEKA NICKI MINAJ INSTAGRAM

Written by -
Image
Nicki Minaja haishiwi vituko vya kupost picha mtandaoni akiwa uchi kabsa ama nusu uchi. Tazama hiyo picha hapo juu inayoonesha matako yake yakiwa wazi. Picha nyingine hii hapa japo amevaa nguo lakini mmmh!! Kwa wanaume so conducive kabisaaa. Cheki jinsi tako lilivyobinuliwa hapa hivi eti njiani anakopita kwa mavazi haya hawapi wanaume shida!!! Haya yote yanakuja wakati Nicki anajiandaa kuachia Album yake mpya ya Pink Friday Print. Album hiyo inapatikana kwenye iTune pia. Picha hizo ziko katika akaunti yake ya Instagram @nickiminaj.  WASILIANA NAMI:  Facebook: VENANCE BLOG  Twitter: @Venancetz  Instagram: venancegilbert  Asante kwa kutembelea VENANCE BLOG © 2014
Soma zaidi

MKUTAO WA G7 KUANGAZIA USALAMA NA MAZINGIRA

Written by -
Image
Viongozi wa nchi tajiri zaidi duniani zinazounda kundi la G7 wanatarajiwa hii leo kutoa msimamo wa pamoja dhidi ya vitisho vya kiuslama vinavyoikumba dunia vikiwemo kitisho cha makundi ya wanamgambo wenye itikadi kali hadi kile Rais wa Marekani Barack Obama amelaani na kuutaja kama uchokozi wa Urusi nchini Ukraine. Kwa mara ya tatu mfululizo, viongozi hao wamemtenga Rais wa Urusi Vladimir Putin kutoka mkutano huo ulioanza hapo jana na unaokamilika hii leo katika mji wa Elmau nchini Ujerumani na badala yake wamewaalika viongozi kutoka kwingineko akiwemo waziri mkuu wa Iraq Haider al Abadi na Rais wa Nigeria Muhammadu Buhari ambao wote wawili wanakabiliwa na kitisho kutoka makundi ya wanamgambo. Kansela wa Ujerumani Angela Merkel na Rais wa Ufaransa Francois Hollande wanatarajiwa kuangazia masuala ya mazingira katika mkutano huo hasa kuongezeka kwa viwango vya joto duniani na athari zake. Chanzo: DW
Soma zaidi

ZIFAHAMU NCHI ZINAZOZUNGUMZA KISWAHILI BARANI AFRIKA

Written by -
Image
Lugha ya Kiswahili inazungumzwa katika nchi za Afrika Mashariki. Kiswahili hutumika nchini Tanzania, Kenya, Jamhuri ya Kidemokrasia ya Kongo, Msumbiji na Rwanda. Zaidi ya watu milioni 1 5 katika bara hili huitumia lugha hi i kama lugha ya kwanza na wazungumzaji wengine wakiitumia kama lugha ya pili au ya tatu. Ni lugha rasmi ya M uungano wa Afrika. Hii inafanya bara hili kuwa na idadi inayozidi milioni 100 ya wazungumzaji wa lugha hii. Kiswahili ni miongoni mwa lugha kumi zinazoongoza kwa kua na idadi kubwa ya wazungumzaji barani Afrika. TANZANIA Kiswahili nchini Tanzania ni lugha rasmi na lugha ya Taifa. Ni lugha ya utambulisho kwa Mtanzanianainatumika kama lugha ya kuimarisha uelewano, ushirikiano na umoja wa kitaifa. Katika kuiendeleza, juhudi za usanifishaji zimefanyika kwa kuwatumia wataalamu wa fasihi na isimu, wadau wengine na wachapishaji vitabu. Taasisi mbalimbali zimebuniwa kuhusu lugha hii kama vile BAKITA, BAKIZA, Taasisi ya Elimu, UWAVI...
Soma zaidi

WAFAHAMU WAIGIZAJI 10 WA KIKE WA KOREA AMBAO NI WAREMBO KWA MWAKA 2017

Written by -
Image
Jana nilikuletea orodha ya waigizaji 10 wa kiume wenye mvuto nchini Korea Kusini, leo tuangalie upande wa pili kwa akina dada ambao ni warembo zaidi. #10. Han Ye Seul   Han Ye Seul alizaliwa chini Marekani japokuwa ana asili ya Korea. Anaigiza series na filamu za kawaida. Alionekana katika Nonstop 4 na pia ameigiza katika muvi kama vile Couple or Truble, Birth of a Beauty, Miss Gold Digger na Penny Pincher. Baada ya kupata umaarufu nchini Korea aliamua kufuta uraia wake wa Marekani na kuamua kuwa raia wa Korea Kusini. #9. Song Hye Kyo Song Hye Kyo alipata umaarufu katika tasnia ya muvi nchini Korea katika muvi kama vile Autumn in My Heart, All In, Full House, The World They Live In na nyinginezo. Ni mwenye furaha na amekuwa akiigiza muvi zake vizuri sana. #8. Lee Da Hae Lee Da Hae ni muigizaji maarufu nchini Korea Kusini. Ameigiza katika My Girl, Green Rose, The Slave Hunter, Miss Ripley na Hotel King. Ameigiza pia katika muvi za Kichina kama vile Actually Lob...
Soma zaidi

WAFAHAMU WAIGIZAJI 10 WA KIUME WENYE MVUTO KOREA 2017

Written by -
Image
Uhali gani msomaji na mfuatiliaji wa VENANCE BLOG? Nakukaribisha katika darasa jipya la kufahamu mambo kadha wa kadha kama yanavyokuwa yakipigiwa kura na watu kutoka vyanzo tofauti kama vile tovuti, mitandao ya kijamii, watu wenye ushawishi, majarida n.k. Basi kwa kuanza leo nakuletea orodha ya waigizaji 10 wa kiume wenye mvuto nchini Korea. Vigezo vilivyotumika husemwa na mtandao husika unaotoa orodha hiyo. Ili kurahisisha kazi hii, mimi kama Blogger ntakuletea orodha hizi kila siku kwa lugha ya Kiswahili. Na tuanze sasa, tunaanzia Korea Kusini kuangalia waigizaji wa kiume wenye mvuto kwa mwaka 2017: # 10. Lee Byung-Hun Lee Byung-Hyun ni muimbaji, mwanamitindo na muigizaji kutokea Korea ya Kusini. Anamiliki kampuni yake ya BH Entertainment. Ni muhitimu wa masuala ya filam na maigizo katika Chuo Kikuu Chung Ang. Anazungumza Kiingereza, Kifaransa, Kikorea na Kimandarin lakini pia ni mfuasi wa dini ya Budha. Alizaliwa Julai 12, 1972 katika jimbo la Gyeonggi Korea ya Kusini. Alianz...
Soma zaidi

HISTORIA YA KOMBE LA DUNIA TANGU 1930, WAANDAAJI & WASHINDI

Written by -
Image
KUANZISHWA KWA MICHUANO YA KOMBE LA DUNIA Mafanikio ya michuano ya mpira wa miguu ya Olimpiki ndiyo yalikua mwanzo wa  FIFA kutamani kuwa na michuano yake ya Kombe la Dunia kwa mchezo wa mpira wa miguu. Ikumbukwe kwamba kipindi hicho mpira wa miguu wa wanaume pekee ndiyo ulikuwepo. Maswali yalitumwa kwa wahisani wa FIFA ili kuona kama wanakubaliana na uanzishwaji wa michuano hiyo na kwa masharti yapi? Kamati maalumu ilichunguza maswali hayo chini ya uongozi wa  Rais wa FIFA wa kipindi hicho Jules Rimet akishirikiana na Katibu wa Shirikisho la Soka nchini Ufaransa kwa wakati ule Henri Delaunay. Rais wa FIFA Jules Rimet aliyeanzisha na kusimamia Kombe la Dunia la kwanza . Kufuatia uwepo wa muswada wa Kamati Tendaji ya FIFA, lilifanyika kongamano la FIFA Mei 28, 1928 jijini Amsterdam nchini Uholanzi likiazimia kuwepo kwa michuano ya mabingwa wa soka duniani ambayo ilipangwa na shirikisho hilo la mpira duniani na sasa nchi waandaji wa michuano hiyo zilitakiwa ...
Soma zaidi

WALIOCHAGULIWA CHUO CHA MIPANGO MAJINA HAYA HAPA

Written by Anonymous -
Image
Chuo cha Mipango ama Institute of Rural Development Planning kimetangaza majina ya wanafunzi waliochaguliwa kujiunga na kozi mbalimbali za shahada (Bachelor Degree) chuoni hapo mwa mwaka wa masomo 2016/207. BOFYA HAPA KUANGALIA MAJINA HAYO IMPORTANT NOTICES TO SELECTED STUDENTS The selected candidates must report at the Institute’s main campus Miyuji area on Monday 17 th October, 2016 ready for orientation program. Joining instructions can be downloaded from the website www.irdp.ac.tz and can also be collected from the main campus admission office. Tuition fees for Bachelor Degree courses 850,000/= Registration fee is 50,000/=, Students organization fee 20,000/= sports and games is 10,000/= and NACTE Quality Assurance Fee 20,000/=. Students are required to pay atleast half of the tuition fee and 100,000/= for registration, students organization, sports and games and NACTE Quality Assurance Fee. The payment should be made through CRDB Bank account no. 01J1082678600 before 1...
Soma zaidi

BIBI WA MIAKA 85 AKAMATWA KWA KUIBA HERENI

Written by -
Image
Bibi kizee mmoja mwenye umri wa miaka 85 raia wa Marekani na ambaye amekuwa akiiba vito vya thamani kwa zaidi ya miaka 60 amehukumiwa tena kwa kosa la wizi. Doris Payne, anatuhumiwa kwa wizi wa herini ya thamani ya dola 690, kutoka katika duka moja la uuzaji wa vitu vya thamani la Saks katika kiunga kimoja mjini Atlanta-Marekani. Wakili wake anatafuta namna ataachiwa huru kwa sababu ya kudorora kwa afya yake. Payne, ambaye maisha yake ya wizi yaliwekwa katika filamu mwaka 2013, amewahi kufungwa jela mara kadhaa kwa makosa mengi tu ya wizi na uhalifu. Wakuu nchini Marekani wanasema kuwa, ametumia majina 22 ya bandia tangu alipoiba almasi kwa mara ya kwanza akiwa na umri wa miaka 23, na akaweza kukwepa kutiwa mbaroni. Muungano wa Walinzi wa vitu vya thamani JSA, kampuni moja kubwa ya kibiashara, ilituma tahadhari kwa maduka yote yanayouza bidhaa na mapambo ya thamani kujihadhari na mwizi huyo sugu mapema miaka ya 70. Rais wa kampuni hiyo kubwa alitaja tabia ya bi kizee huyo ...
Soma zaidi

MAMBO YA MUHIMU KUFAHAMU NA KUZINGATIA KABLA YA KUCHAGUA KOZI (TAALUMA) CHUO KIKUU

Written by -
Image
Picha kwa hisani ya Debt.org 1.0 UTANGULIZI Nilipokuwa mwanafunzi wa chuo kikuu nilisikia manung'uniko miongoni mwa wanafunzi wenzangu wengi wa vyuo vikuu ambayo yalitokana na taaluma wanazosoma. Kuna sababu kadha wa kadha zinazopelekea manung'uniko hayo miongoni mwa wasomi hawa tukiachilia mbali suala la ucheleweshwaji wa mikopo miongoni mwa wasomi hawa (kwa sasa changamoto hii inapungua kadiri siku zinavyosonga). Tatizo lingine ambalo linawasumbua wasomi hawa ni suala la uchaguzi wa taaluma gani akaisome Chuo Kikuu. Uchaguzi wa taaluma (career choice) ni jambo nyeti sana na la kuzingatia kwa muhitimu yeyote wa elimu ya kuanzia kidato cha nne. Jamii yetu ya Tanzania haifahamu kwa undani kuhusu umuhimu wajambo hili lakini huku ndiko msingi hundaliwa. Mtu anapohitimu kidato cha nne na kupata ufaulu wa kujiunga na masomo ya kidato cha tano ama ngazi ya astashahada (certificate) na stashahada (diploma) hapo ndipo uchanguzi wa taaluma huanza. Kwa kuandika makala haya ninakusudia ...
Soma zaidi