Tips AI | IT & AI

Нашел еще одну интересную статью: парень 2 дня собирал трафик ChatGPT, чтобы понять как на самом деле выбираются источники для цитирования

Через DevTools браузера он смотрел события сети и искал в JSON скрытые поля, которые не видны в обычном ответе.

Так он нашел result_source, который содержит в себе метки про источники:
1/ serp — обычная поисковая выдача из поиска
2/ labrador — крупные источники с лицензией по типу Wikipedia, Reuters и тд.
3/ bright и oxylabs — сторонние скрейперы веба

Таким образом он собрал и изучил около 1240 записей и несколько десятков поисковых запросов используя всего один Pro аккаунт.

Механизм выбора источников у ChatGPT примерно такой:

1/ Сначала ChatGPT решает нужно ли вообще идти в веб
2/ Если да, то дальше он разбивает запрос юзера на несколько мелких проверок (найти цену сервиса, найти список функций, проверить репутацию и тп.)

Вот дальше очень важна читаемость страницы: если цена лежит в обычном HTML, то модель возьмет её с официального сайта и процитирует именно его.

(Обычно просто ищет символы вроде $ и €)

Но если цена появляется только после JavaScript или спрятана в картинке, то модель её не увидит и пойдет искать на Reddit, обзорах или вообще у конкурентов.

Тут есть важный момент: источник, цитата и упоминание — это разные вещи.

- Страница может быть загружена моделью, но не процитирована
- Может быть процитирована, но бренд не будет упомянут
- А может быть упомянут бренд, но источник для утверждения будет чужой

ChatGPT может загрузить Reddit, YouTube и ваш сайт, но процитировать только то что лучше подкрепляет ответ.

В таких случаях Reddit обычно выигрывает, потому что там много текстового смысла.

Если хотите это повторить, откройте DevTools в браузере и вставьте туда этот скрипт:

const t = (await (await fetch('/api/auth/session')).json()).accessToken;
const c = await (await fetch('/backend-api/conversation/' + location.pathname.split('/c/')[1], {headers: {Authorization: 'Bearer ' + t}})).json();
const rows = [];
JSON.stringify(c, (k, v) => {
if (v && v.result_source) {
const d = (v.attribution || v.url || '?').toString();
rows.push({source: d.replace('https://', '').replace('www.', '').split('/')[0], pipeline: v.result_source});
}
return v;
});
console.table(rows);

Он вытащит из текущего диалога список источников и покажет откуда они пришли: serp, labrador и тд.

Если подшаманить над скриптом можно вытаскивать еще и поисковые запросы, цитаты и логику выбора источников.

@tips_ai #news

👍26🔥12❤7

6.01K views12:25