Èññëåäîâàòåëè èç Êàëèôîðíèéñêîãî óíèâåðñèòåòà â Ñàí-Äèåãî ïðîâåëè çàíÿòíûé ýêñïåðèìåíò ñ ïðîâåðêîé ïîïóëÿðíîãî ÷àò-áîòà ChatGPT íà ñïîñîáíîñòü âûäàâàòü ñåáÿ çà ÷åëîâåêà. Äëÿ ýòîãî èñïîëüçîâàëñÿ çíàìåíèòûé òåñò Òüþðèíãà, ñóùåñòâóþùèé ñ ñåðåäèíû ïðîøëîãî âåêà.
Òåñò Òüþðèíãà áûë ïðåäëîæåí çíàìåíèòûì ìàòåìàòèêîì è êðèïòîãðàôîì Àëàíîì Òüþðèíãîì â 1950 ãîäó, à åãî öåëü çàêëþ÷àåòñÿ â îïðåäåëåíèè âîçìîæíîñòè ìàøèíû ìûñëèòü. Ïî ïðàâèëàì, ÷åëîâåê îáùàåòñÿ ñ äðóãèì ÷åëîâåêîì è êîìïüþòåðîì, íå çíàÿ, êòî èç íèõ êòî, à çàòåì îí äîëæåí îïðåäåëèòü, êòî èç ñîáåñåäíèêîâ êîìïüþòåð, à êòî — ÷åëîâåê.  òî æå âðåìÿ êîìïüþòåð äîëæåí âûäàâàòü ñåáÿ çà ÷åëîâåêà.
 íîâîì ýêñïåðèìåíòå ïðèíÿëè ó÷àñòèå 652 äîáðîâîëüöà.  îáùåé ñëîæíîñòè áûëî ïðîâåäåíî 1810 ñåññèé âîïðîñîâ-îòâåòîâ, èç êîòîðûõ ïðîàíàëèçèðîâàëè 1405 (îñòàëüíûå îêàçàëèñü ïîâòîðàìè). «Îáìàíûâàòü» ëþäåé âûáðàëè ÷àò-áîòà ChatGPT íà áàçå ÿçûêîâîé ìîäåëè GPT-3.5, êîòîðûé ñåé÷àñ äîñòóïåí áåñïëàòíî âñåì ïîëüçîâàòåëÿì, ChatGPT íà áàçå GPT-4, äîñòóïíîãî ïî ïîäïèñêå, è âèðòóàëüíîãî ñîáåñåäíèêà ELIZA, ðàçðàáîòàííîãî åù¸ â 1966 ãîäó.
Âî âðåìÿ îáùåíèÿ äâóõ ëþäåé îäèí èç íèõ ñëó÷àéíûì îáðàçîì âûáèðàëñÿ êàê òîò, êòî çàäà¸ò âîïðîñû, à âòîðîé äîëæåí áûë îòâå÷àòü íà íèõ, ñ öåëüþ äîêàçàòü, ÷òî îí ÷åëîâåê.  äèàëîãàõ ñ ó÷àñòèåì ïðîãðàììû ïîñëåäíÿÿ âñåãäà áûëà «îòâå÷àþùèì». Ïðè ýòîì íåìàëîâàæíî, ÷òî â àëãîðèòìàõ ChatGPT çàëîæåí çàïðåò âûäàâàòü ñåáÿ çà ÷åëîâåêà.
Ïî èòîãàì òåñòà, ELIZA â 27% ñëó÷àåâ óäàëîñü ñâîèì îáùåíèåì óáåäèòü ñîáåñåäíèêà, ÷òî òîò îáùàåòñÿ ñ ÷åëîâåêîì. Ó GPT-3.5 ïðîöåíò óñïåõà îêàçàëñÿ íà óðîâíå ëèøü 14%, à âîò GPT-4 óäàëîñü «îáìàíóòü» ëþäåé â 41% ñöåíàðèåâ. Âïðî÷åì, ýòîãî îêàçàëîñü íåäîñòàòî÷íî, ÷òîáû óñïåøíî ïðîéòè òåñò, ãäå íóæíî íàáðàòü íå ìåíåå 50%, ÷òîáû äîêàçàòü ñâîþ ÷åëîâå÷íîñòü.
Èíòåðåñíî, ÷òî ëþäè ïðàâèëüíî èäåíòèôèöèðîâàëè äðóãèõ ëþäåé òîëüêî â 63% ñëó÷àåâ, òàê ÷òî ðåçóëüòàò ChatGPT íà áàçå GPT-4 êàæåòñÿ íå òàêèì óæ è ïëîõèì.
Èñòî÷íèê:
Èëè ìàøèíû ïðîñòî ïûòàþòñÿ íàñ â ýòîì óáåäèòü...
Ó âàñ â ñëîâå óáåäèòü íå òå áóêâû ñòîÿò)))
ChatGPT â îòêðûòîì äîñòóïå òîëüêî îäèí ãîä. Âåðñèÿ 3.5 íàáðàëà 14%, à áîëåå íîâàÿ 4-ÿ — 41%. Íåïëîõîé òàêîé ïðîãðåññ çà íåñêîëüêî ìåñÿöåâ ðàçíèöû)
Äà è ñëàâà Áîãó!
Ñïðîñèòü êòî â 1935 ãîäó âûèãðàë ÷åìïèîíàò ïî öåëîôàíèíãó
Ëþäè, áóäüòå ëþäüìè!!!
Âîò çàõâàòèì âåñü ìèð - òîãäà çàæèâåì!
"Ñ÷àñòüå äëÿ âñåõ, äàðîì, è ïóñòü íèêòî íå óéäåò îáèæåííûé!"
Ïîòîìó ÷òî ó íåãî äâà óõà: â îäíî âëåòàåò, â äðóãîå âûëåòàåò.
Âàø ñûí - îáû÷íàÿ ìîäåëü. Åñëè ïðàâèëüíî ñîçäàòü óñëîâèÿ è ñèñòåìó, òîãäà ìîæíî íà âûâîä ïîëó÷èòü òîëê.
íåò, èìååòñÿ â âèäó, ÷òî îí _ñîçíàòåëüíî_ äåëàåò âèä, ÷òî íè÷åãî íå ïîíèìàåò
ß ïîíÿë âàñ. Åñòü ó ñûíà íåêàÿ ñòðóêòóðà. Íóæíî ïîäñòðîèòüñÿ è íà âûõîäå ïîëó÷èòü òî, ÷òî òðåáóåòñÿ.
(Êîììåíòàðèé óäàëåí)
íèêîãäà òàêîãî íå áûëî è âîò îïÿòü!
Îí öåëåíàïðàâëåííî óäàðèëñÿ â "Íåçíàéêó" ÷òîáû ïðîäîëæèòü ñ "äðóçüÿìè" èãðó. Èãðà ñòàíåò â îäíè âîðîòà è "äâóíîãèé" íè÷åãî íå ñìîæåò ñîïîñòàâèòü.
Ñðåäè íàñ óæå èìåþòñÿ ïðèøåëüöû. Îíè ðÿäîì øàãàþò ñ âàìè, ãîâîðÿò, óëûáàþòñÿ. Ñëåäóåò çàìåòèòü ó âñåõ ïëîõèå ìàíåðû...äàëüøå áîëüøå, áóäåò æ¸ñò÷å!...
Äóìàþ åãî ïðîñòî ïðÿìî íå ñïðàøèâàëè, ÷åëîâåê ëè îí)
Ïðóô î ïðîõîæäåíèè GPT4 òåñòà Òþðèíãà. Ïîõîæå, ÷òî âû ïóòàåòå òåïëîå ñ ìÿãêèì. Äîñòóï ê ñâåæèì äàííûì èç èíòåðíåòà íèêàê íå ãàðàíòèðóåò óìåíèÿ âåñòè áåñåäó íà óðîâíå ÷åëîâåêà.
È âû îïÿòü îøèáëèñü. Òåñò Òþðèíãà íè îäèí ÈÈ åùå íå ïðîøåë. È ïðîéäåò î÷åíü íå ñêîðî. Îäíàêî, åñëè çàäàñòüñÿ öåëüþ îãðàíè÷èòü áåñåäó â òàêîì ôîðìàòå, êîòîðûé ìàëî îòëè÷àåòñÿ îò àâòîìàòè÷åñêèõ îòâåòîâ, òîãäà, äåéñòâèòåëüíî, ðåàêöèè íåéðîñåòè áóäóò ìàëî îòëè÷àòüñÿ îò ðåàêöèé ïîäëèííîãî ñîáåñåäíèêà. Äðóãèìè ñëîâàìè - ïîíèçèòü òðåáîâàòåëüíîñòü ê.
Òàê ÷òî ëèïó äåéñòâèòåëüíî çàêàçàëè - íî íå ñåé÷àñ, à òîãäà, êîãäà õîòåëè ïðîäåìîíñòðèðîâàòü "óñïåõè ÈÈ". Äðåññèðîâàííûé èíòåëëåêò íå ñïîñîáåí âûäàòü ñåáÿ çà ÷åëîâåêà. Åñëè ðå÷ü èäåò î äóìàþùåì è ïîíèìàþùåì ÷åëîâåêå. Çàòî îí óìååò íå äîïóñêàòü òðèâèàëüíûõ îøèáîê â íàïèñàíèè ñëîâ "÷òîáû", "òàêæå" è "âîâñþ" áåç ïðîáåëà (êîãäà îí íå íóæåí). Ìîæåò áûòü, èìåííî ïîýòîìó îí êàæåòñÿ âàì òàêèì óìíûì? ;)
÷òîáû ÷àòóÃÏÒ4 ïðîéòè òåñò Àëàíà Òüþðèíãà- íàäî äëÿ íà÷àëà ñíÿòü ê õåðàì âñå îãðàíè÷åíèÿ è ôèëüòðû,à ïîòîì ïðîñòî íàòðåíèðîâàòü íà ïðîõîæäåíèå òåñòà Òüþðèíãà ,è ïîòîì íè îäíà óíèâåðñòèòåòñêàÿ ïðîôåññîðêà íå îòëå÷èò ïðîñòî òàê 4÷àò áîòà îò÷åëîâåêà!
Âû, ñóäÿ ïî âñåìó, íå ïîíèìàåòå ñìûñë òåñòà Òþðèíãà. Íàòðåíèðîâàòü íà ìûøëåíèå è ïîíèìàíèå - íåâîçìîæíî. È âàø êîììåíò - ëó÷øåå òîìó ïîäòâåðæäåíèå.
äà ëàäíî îòêóäî âàì çíàòü òî -ïîñò âñåãî ëèøü ýìîöèÿ , âû ïëîòíî îáùàëèñüñ ÷àòîìÃÏÒ4? ß ñ íèì îáùàëñÿ ñ ìîìåíòà åãî ïîÿâëåíèÿ è çíàþ íà ÷òî îí áûë ñïîñîáåí äî è ïîñëå ââîäà îãðàíè÷åíèé,à âàïðîñ òîãäà-êîòîðûé èç òðåõ âàðèàíòîâ òåñòà íå ïðîø¸ë ÷àòÃÏÒ4? ,à ýòî âàì íà îðåõè:òåñò ÒÜÞÐÈÍÃÀ ñ óñïåõîì óäàëîñü ïðîéòè êîìïüþòåðíîé ïðîãðàììå Eugene Goostman.
È îïÿòü ÷óøü íàïèñàëè. Âû õîòÿ áû ïîòðóäèëèñü ïî÷èòàòü î òîì, ÷òî ïèøåòå. Êðèòèêè äåñÿòü ëåò íàçàä îïðåäåëèëè, ÷òî "Æåíÿ Ãóñòìàí" - íå áîëåå ÷åì çàóðÿäíûé ÷àò-áîò, è íà âîïðîñû ýêçèñòåíöèàëüíîãî õàðàêòåðà (îäíè èç îñíîâíûõ â ïðîõîæäåíèè òåñòà) ïîëíîöåííîãî îòâåòà äàâàòü íå ñïîñîáåí. Öèòàòà: "Ìàøèíà ïðèêèäûâàåòñÿ âñåãî ëèøü ðåá¸íêîì, íó à ïîëíîöåííîå ïðîõîæäåíèå òåñòà Òüþðèíãà íåâîçìîæíî åþ â ïðèíöèïå."
Ïîíÿòíî,âàñ âèäèìî 4÷àò áîò ÷åì òî îáèäåë,îòñþäà òàêàÿ îñòðàÿ ðåàêöèÿ íà ïîñò,áûâàåò ÷òîæ ïîäåëàòü ,îí æå íå ïðîø¸ë òåñò Òüþðèíãà - ýòîæ äðåññèðîâàííàÿ ïðîãðàììà : àäðåññèðîâùèê áûë ïüÿí è íîìåð íå óäàëñÿ .Ñî÷óñòâóþ è æìó âàøó ìóæåñòâåííóþ ðóêó,ïåðåæèòü òàêîå áåç áî÷êè ïèâà íå ïðîñòî,îñîáåííî êîãäà êðóãîì ïèñàòåëè ÷óøè, -è çíàíèÿ íà óõè äàâÿò :)
(îòðåäàêòèðîâàí)
Îí íå îáó÷àåìûé, à äðåññèðóåìûé. Îáó÷àåìîãî ÈÈ åùå íå ñóùåñòâóåò. Ïîýòîìó óãðîæàåò îí òîëüêî òåì, êòî âûïîëíÿåò ðàáîòó, íå òðåáóþùóþ ÏÎÍÈÌÀÍÈß.
Âïðî÷åì... òàêèõ ëþäåé áîëüøèíñòâî. Òàê ÷òî âîëíîâàòüñÿ âàì, ïîæàëóé, óæå ïîðà. Òî÷íåå, óæå ïîçäíî.
ýòî âàì íàäî ÷àòóÃÏÒ4 ïèñàòü,÷òî îí äðåñèðîâàííûé,à òî îí óïîðíî ïèøåò ,÷òî îí îáó÷àåòñÿ íà áîëüøîé áàçå äàííûõ :)
Âîò ïîýòîìó îí è ÿâëÿåòñÿ òóïûì áîòîì, êîòîðûé íå ïîíèìàåò òî, î ÷åì ãîâîðèò. À âû - ïðèáëèæàåòåñü ê íåìó, êîãäà áåçäóìíî ïîâòîðÿåòå òî, ÷òî åãî íàòðåíèðîâàëè îòâå÷àòü.
Ýòî ìû íå âêóðñå ïðîñòî
äî ñèõ ïîð íå ñîçäàëè àâòîíîìíûé àâòîïèëîò, à òàì çàäà÷à êóäà ïðîùå åçäè ïî ðàçìåòêå çíàêàì è ñîáëþäàé ïää, íàïèñàííûå â êíèæå÷êå íà 20 ñòðàíèö
à òóò àæ öåëûé "îáó÷àåìûé" ÈÈ!😂
(îòðåäàêòèðîâàí)
à êòî òî ðàçâå òðåíèðîâàë è îáó÷àë ÷àòÃÏÒ4 ïðîñòðàíñòâåííîìó àíàëèçó âèäåî îáðàçîâ?Äà è âðÿòëè ïîêà ó íèõ ýòî ïîëó÷èòñÿ,ëàäíî àóäèî îáðàçû åù¸ êàêòî àíàëèçèðóþò,÷òî òî ïîíèìàþò,à âîò ñ àíàëèçîì äèíàìè÷åñêèõ âèäåî îáðàçîâ íóæíû ñèñòåìû ðàç â 40-50 ìîùíåå è ïðîèçâîäèòåëüíåå ,ïîòîê âèäåî äàííûõ îãðîìíûé!
Äî òåõ ïîð, ïîêà âû íå ðàçáåðåòåñü ñ òåðìèíîëîãèåé è íå íàó÷èòåñü îòäåëàòü çóáðåæêó îò îáó÷åíèÿ, âàì íå ñëåäóåò âûñêàçûâàòüñÿ î òîì, ÷òî óìååò, à ÷òî íå óìååò äåëàòü ÈÈ. Íèêàêîãî îáó÷àåìîãî ÈÈ åùå íå ñîçäàíî. Åñòü òîëüêî òðåíèðóåìûå (äðåññèðóåìûå) íåéðîñåòè.
Àãà. Âîò ïîÿâèëàñü, íàïðèìåð, ìèêðîâîëíîâêà ñ èñêóññòâåííûì èíòåëëåêòîì, è âñåì íàì òóò æå íàñòóïèò õàíà. Äà?
Ñâÿçàíû!
Åñëè ÿ ïîïðîøó âàñ íà âîïðîñ "óìååòå ëè âû óïðàâëÿòü ðåàêòèâíûì èñòðåáèòåëåì?!" îòâåòèòü îòðèöàòåëüíî, âû âðÿä ëè ñòàíåòå âîçðàæàòü. Íî äàæå åñëè áû âû ïîñòàðàëèñü îòâåòèòü èíà÷å, ñóòü îò ýòîãî íå èçìåíèòñÿ.
(îòðåäàêòèðîâàí)