GPT-3

GPT-3
Jatorria
Sorrera-urtea	2020
Argitaratze-data	2020
Azken bertsioa	175B
Aurkezpen data	2020ko maiatzaren 28a
Ezaugarriak
Egile-eskubideak	copyrightduna
Lizentzia	lizentzia jabedun
Deskribapena
Honen parte da	OpenAI API (en)
Ekoizpena
Garatzailea	OpenAI
Fikzioa
Erabiltzen du	transfer learning (en) eta unsupervised learning (en)
arxiv.org…
Iturri-kodea	https://github.com/openai/gpt-3
kronologia
←GPT-2 (en) GPT-3 →GPT-4 (en) eta ChatGPT

GPT-3 (Generative Pre-trained Transformer-en 3. bertsioaren laburdura) ikasketa sakona erabiltzen duen hizkuntza-eredu bat da, giza idazketa simulatzen duena testuak sortzeko. Testuak asmatzeko GPT serieko ereduen hirugarren belaunaldia da, OpenAI adimen artifizialeko ikerketa-laborategiak sortua.^[1][2]

GPT-3ren bertsiorako hizkuntza-ereduan 175.000 milioi ikasketa-parametro doitu dira, segidako aurreko belaunaldian (GPT-2) baino azkoz gehiago. GPT-3 2020ko maiatzean kaleratu zen, eta beta fasean egon zen 2020ko uztailera arte.^[3] "Aurrez entrenatutako hizkuntza-errepresentazioa" erabiltzen du, hizkuntzaren prozesamenduko (NLP) joerari jarraituta.

GPT-3k sortzen dituen testuen kalitatea hain da handia, ezen zaila baita gizakiek idatzitakoetatik bereiztea, horrek berekin dakartzan onurak eta arriskuekin. 2020ko maiatzaren 28ko argitalpenean, sortzaileek GPT-3ren balizko arriskuez ohartarazten dute, eta arrisku horiek arintzeko laguntza eskatzen dute. David Chalmers filosofo australiarraren ustez GPT-3 da "inoiz sortu ez den adimen artifizialeko sistema interesgarri eta garrantzitsuenetariko bat".^[4]

Bestalde, sortutako zenbait testutan agertutako koherentzia-falta dela-eta, aipatu da GPT-3ren prozesamendua sintaktikoa dela nagusiki, testuaren semantikaren kaltetan.^[5]

1. ↑ Shead, Sam. (23 de julio de 2020). Why everyone is talking about the A.I. text generator released by an Elon Musk-backed lab. . Se liberaron cuatro preimpresiones entre el 28 de mayo 28 y el 22 julio de 2020
2. ↑ Arrieta, Xabier. (2021-11-18). «OpenAI. Iritsiko al da pertsonek ala makinek hitz egiten diguten bereiziko ez dugun unea?» Sarean .eus (Noiz kontsultatua: 2023-01-08).
3. ↑ Bussler, Frederik. (21 de julio de 2020). «Will GPT-3 Kill Coding?» Towards Data Science.
4. ↑ Chalmers, David. (20 de julio de 2020). «GPT-3 and General Intelligence» Daily Nous.
5. ↑ Marcus, Gary; Davis, Ernest. (22 de agosto de 2020). «GPT-3, Bloviator: OpenAI’s language generator has no idea what it’s talking about» MIT Technology Review.