граница AI
May. 26th, 2023 03:19 pm(chatgpt4, который умеет ходить по ссылкам)
Пересказать на другом языке новостную статью - запросто. Просто отлично.
Попросить пересказать идеи из faultlore (https://faultlore.com/blah/tower-of-weakenings/) - его корёжит, пучит, ломает (в буквальном смысле - error in the stream), три попытки, и ни разу ни чего, хотя бы отдалённо напоминащего разумный пересказ сложной идеи.
В целом, наверное, так и надо тестирвать AI. Даёшь сложную статью, просишь пересказать своими словами идею статьи. Человек может понять Арию, AI - нет.
Пересказать на другом языке новостную статью - запросто. Просто отлично.
Попросить пересказать идеи из faultlore (https://faultlore.com/blah/tower-of-weakenings/) - его корёжит, пучит, ломает (в буквальном смысле - error in the stream), три попытки, и ни разу ни чего, хотя бы отдалённо напоминащего разумный пересказ сложной идеи.
В целом, наверное, так и надо тестирвать AI. Даёшь сложную статью, просишь пересказать своими словами идею статьи. Человек может понять Арию, AI - нет.
no subject
Date: 2023-05-26 06:07 pm (UTC)Не согласен! ИИ тоже может понять, но его, этого ИИ, пока еще нет.
Есть умелый проходитель теста Тьюринга, читерящий на том, что собеседники ему, в массе своей, достаются обделенные ЕИ.
no subject
Date: 2023-05-27 05:09 pm (UTC)Ну, я имею в виду, тот ИИ, с которым мы имеем дело сейчас. В целом, я бы сказал, что прохождение теста Тьюринга менее важно, чем способность пересказать не трвиальное, а, наоборот, что-то существенное. Ария великолепна, но читать её сложновато. Для человека. Для ИИ (текущего уровня) - невозможно.
То есть попросить пересказать сюжет худпроизведения, вроде бы, можно (хотя надо будет проверить на каком-то малоизвестном высокохудожественном рассказе), а вот нетривиальные знания - нет.