OpenAI trenira svoj jezični model na otvorenom webu, evo kako zaustaviti njihovog GPTBota

Nije tajna da će nakon velikog jezičnog modela GPT-4 biti izrađen i GPT-5. OpenAI već na njemu polako radi, a ključ za postizanje što veće kvalitete odgovora jest prikupljanje informacija i “treniranje” tog modela na još većem broju tekstova. Do sada je GPT-4 treniran na više od bilijun riječi prikupljenih iz knjiga, s weba, društvenih mreža i ostalih otvorenih izvora. Nasljednik će to morati značajno premašiti, pa su u OpenAI-ju pokrenuli novi internetski bot, crawler nazvan GPTBot.

Namjena mu je prikupljati podatke, tj. redom “čitati” dostupne mu sadržaje, kako bi unaprijedio buduće jezične modele. Tehnička dokumentacija kaže kako je programiran da uklanja izvore kao što su naplatni sadržaji, stranice s osobnim podacima ili sadržaji koji bi kršili njihova pravila “lijepog ponašanja”. Međutim, sve ostalo što je dostupno na javnom webu, podložno je korištenju za svrhe treniranja jezičnog modela. Nije to, jasno, svima prihvatljivo, pa je OpenAI objavio i način kako spriječiti njihovog bota u pristupanju podacima.

Dodatak za robots.txt

Kako bi se spriječilo GPTBota u čitanju podataka s određene web stranice, administratori će morati to eksplicitno navesti u datoteci robots.txt. To je tekstualna datoteka koja se obično nalazi u root direktoriju web stranice i služi za komunikaciju s robotima (“crawlerima”), koji automatski pretražuju i indeksiraju sadržaj web stranica. Iako web roboti nisu obavezni slijediti pravila iz te datoteke, oni dobronamjerni će to činiti – pa će se zadanim pravilima povinuti i OpenAI-jev GPTBot.


Što učiniti?

GPTBot se pri posjetu identificira sljedećim tokenom:

User agent token: GPTBot Full

user-agent string: Mozilla/5.0 AppleWebKit/537.36 (KHTML, like Gecko; compatible; GPTBot/1.0; +https://openai.com/gptbot)

Želite li ga spriječiti u “crawlanju” weba, u datoteku robots.txt potrebno je dodati sljedeće dvije linije:

User-agent: GPTBot

Disallow: /

Pristup mu se može i ograničiti na samo neke mape na ovaj način:

User-agent: GPTBot

Allow: /directory-1/

Disallow: /directory-2/


Kritičari ovakvog pristupa slobodnom webu i nekritičnog masovnog prikupljanja podataka kažu kako bi se ono moralo odvijati drugačije. Za sada GPTBot redom pristupa svemu što može pročitati, a administratori ga u tome moraju aktivno spriječiti (po principu “opt-out”). Bolje bi bilo, za privatnost i kontrolu podataka, da se treniranje jezičnih modela čini po principu “opt-in”, tj. da bot ima pristup samo onim stranicama čiji vlasnici to izričito žele. No, i u treniranju velikih slikovnih modela vidjeli smo da njihovi pokretači često ne mare za autorska prava, pa treniraju svoje sustave i na zaštićenim slikama, što je već dovelo do nekoliko sudskih sporova.


Links preporučuje

📢 Uštedi do 180€



AKCIJA!

PlayStation

Ostvari super uštede na tražene PlayStation konzole!

349,99€
2.637,00 kn

Kupi


Ronis preporuka

Za vrhunsko audio iskustvo.



Pojačalo PRIMARE I25 titan

PRIMARE I25 Prisma titan, modularno stereo integrirano pojacalo s DAC-om i mrežnim playerom.

1.900,00 €
14.315,55 kn


2.240,00 €

Akcija

Uživaj u zvuku kao nikad dosad.



Zvučnici AUDIOVECTOR QR5 crni (par)

Savršena detaljnost visokog spektra pruža vam brojne sate uživanja u glazbi, bez umaranja slušatelja. Snažan i dinamičan bas vjerno i životno prezentira svaku snimku.

2.699,00 €
20.335,62 kn

3.279,00

Akcija

Zvuk koji nadmašuje očekivanja.



Zvučnici KEF LSX bijeli (Wi-Fi, Bluetooth)

Aktivni bežični zvučnici kompaktnih dimenzija. Apple Airplay 2, Spotify Connect, Tidal, DLNA, 48kHz/24bit rezolucija (ili 96kHz/24bit korištenjem žičane veze), Wi-Fi, Bluetooth, KEF Control aplikacija.

859,00 €
6.472,14 kn


1.015,00 €

Akcija

Perfektan ugođaj kućnog kina.



Soundbar DALI Katch One (iron black)

DALI KATCH ONE soundbar uparuje superiornu audio reprodukciju sa svježim, privlacnim izgledom. S deset ugradenih drivera, perfektno uparenih sa snažnim 4x 50W pojacalom.

639,00 €
4.814,55 kn


749,00 €

Akcija

Svaki detalj, svaki šapat – čuj sve.



Subwoofer KLIPSCH Reference R-121SW crni

Ugrađeno, potpuno digitalno pojačalo daje veliku snagu s visokom učinkovitošću i točnošću izvoru u reprodukciji, osiguravajući maksimalnu učinkovitost za najbolji izlaz u klasi, detalje i snagu. 12″ drajver visokih performansi pruža duboki bas i fleksibilno postavljanje u prostoriju.

595,00 €
4.483,03 kn


595,00 €

Akcija

Kvaliteta zvuka, bez kompromisa.



Stereo receiver CAMBRIDGE AUDIO AXR 100

Snaga 85 W po kanalu (8 ohma), 4 analogna ulaza, 1 fono ulaz, 1 AUX ulaz na prednjoj ploči, ugrađen Bluetooth, 1x REC izlaz, 1x subwoofer izlaz, izlaz za slušalice 6.3 mm, FM/AM Tuner sa RDS, 30 memorija, daljinski upravljač.

549,00 €
4.136,44 kn


629,00 €

Akcija

Spoj tehnologije i umjetnosti zvuka.



Zvučnici WHARFEDALE EVO 4.1 crni

2-sistemski bookshelf zvučnici sa 5″ bas driverom, preporučena snaga pojačala 25-100W, nominalna impedancija 8 ohma, frekvencijski odziv 64Hz ~ 22kHz.

549,00 €
4.136,44 kn


649,00 €

Akcija

Zvučno savršenstvo.



AV receiver DENON AVC-X3800H

S devet kanala pojacala, do cetiri neovisna subwoofera, Dolby Atmos i DTS:X kao i IMAX Enhanced i Auro-3D, AVC-X3800H takoder ispunjava vece dnevne prostore kinematografskim zvukom.

1.249,00 €
9.410,59 kn

Kupi

Snažno srce tvog audio sustava.



Stereo pojačalo AUDAC MFA208

Audac MFA208 je revolucionarno nagradivano dvokanalno pojacalo koje koristi tehnologiju D klase pojacala. Moguce ga je koristiti u sustavima niske impedancije s maksimalnom izlaznom snagom od 2x40W ili u 70/100V sustavima gdje mu je maksimalna izlazna snaga 80W.

645,00 €
4.859,75 kn

Kupi

Zvučna elegancija i izvrsnost.



Zvučnici FALCON ACOUSTIC LS3/5A Gold Badge

Dvostazni standmount, bas-mid: Falcon B-110, bextrene 127 mm, visoki: Falcon T-27, mylar, 19 mm, zatvorena kutija, frekvencijski raspon 70 Hz – 20 kHz, osjetljivost 83 dB, impedancija 15 Ohma.

3.450,00 €
25.994,03 kn

Kupi

Subwoofer koji će tvoju glazbu učiniti još ljepšom.



Subwoofer ACOUSTIC ENERGY AE108²

S veličinom manjom od jednog kubičnog metra, AE1082 se može postaviti diskretno i podesiti a kako bi se postigla idealna audio ravnoteža sa mjesta slušanja.

557,00 €
4.196,72 kn

Kupi

Više o temi

Izvor:Bug.hr