Please open Telegram to view this post
VIEW IN TELEGRAM
🌚19🔥3👎2🤝2🤔1
Пан Джон видав базу - робіть більше власних сайтів для тестів!
Якщо ви технічний SEO-фахівець і хочете краще зрозуміти системи рендерингу Google, ніж це зазвичай потрібно, рекомендую ознайомитися зі статтями Dave Smart і Tony McCreath. Посилання — нижче.
Також, якщо ви технічний SEO-фахівець і хочете практикувати свої навички, створюйте власні тестові сайти, щоб досліджувати, як усе працює. Робота з тестовими сайтами та спостереження за тим, що відбувається, є надзвичайно цінними: ви можете зазирнути «за лаштунки» й побачити, як насправді працюють ті чи інші механізми.
Іноді — не завжди — ви знайдете щось, що допоможе вам приймати більш обґрунтовані рішення. В інших випадках ви просто набудете практичного досвіду, що дозволить упевненіше говорити про технічні теми, коли вони виникатимуть.
Створювати тестові сайти також стало значно простіше завдяки сучасним AI-інструментам. Але, якщо хочете, можна робити це й вручну — як справжній «вебмайстер старої школи».
Links to the posts:
* https://tamethebots.com/blog-n-bits/the-5-second-google-render-limit-myth
* https://bigcommerce.websiteadvantage.com.au/tonys-theory-of-googlebot-relativity/
Якщо ви технічний SEO-фахівець і хочете краще зрозуміти системи рендерингу Google, ніж це зазвичай потрібно, рекомендую ознайомитися зі статтями Dave Smart і Tony McCreath. Посилання — нижче.
Також, якщо ви технічний SEO-фахівець і хочете практикувати свої навички, створюйте власні тестові сайти, щоб досліджувати, як усе працює. Робота з тестовими сайтами та спостереження за тим, що відбувається, є надзвичайно цінними: ви можете зазирнути «за лаштунки» й побачити, як насправді працюють ті чи інші механізми.
Іноді — не завжди — ви знайдете щось, що допоможе вам приймати більш обґрунтовані рішення. В інших випадках ви просто набудете практичного досвіду, що дозволить упевненіше говорити про технічні теми, коли вони виникатимуть.
Створювати тестові сайти також стало значно простіше завдяки сучасним AI-інструментам. Але, якщо хочете, можна робити це й вручну — як справжній «вебмайстер старої школи».
Links to the posts:
* https://tamethebots.com/blog-n-bits/the-5-second-google-render-limit-myth
* https://bigcommerce.websiteadvantage.com.au/tonys-theory-of-googlebot-relativity/
1😁11❤10👍6🤡1
Тест був вдалий
Грошей нема 😅
Ідемо далі
Витрачено на сайт в сумі 4 години
На інфру 20 баксів
Зроблено з ентузіазмом та любо вʼю до процесів автоматизації
Користь : навчилась будувати бази даних, парсити те що не можна парсити, ламати аішку та генерувати те , що вона вважає неетичною
Не кожен проєкт зароблятиме.
Іноді задача прокачати себе та скіли настільки, щоб наступний вистрілив.
Стек: SQL, AI, PHP.
Грошей нема 😅
Ідемо далі
Витрачено на сайт в сумі 4 години
На інфру 20 баксів
Зроблено з ентузіазмом та любо вʼю до процесів автоматизації
Користь : навчилась будувати бази даних, парсити те що не можна парсити, ламати аішку та генерувати те , що вона вважає неетичною
Не кожен проєкт зароблятиме.
Іноді задача прокачати себе та скіли настільки, щоб наступний вистрілив.
Стек: SQL, AI, PHP.
1❤26🌭7🤝7😁3👍2🥴1🍾1
Forwarded from Alex
Здоров колеги, це Саша Белевець
Шукаю собі в команду майбутнього Head of PBN - прямий репортинг мені, нуль бюрократії та мікроменеджменту.
Компанія 10+ років на ринку, портфель 3000+ доменів, готова інфраструктура - база активів накопичена, купа автоматизацій, лінк-прогони вміємо робити автоматично і масовано.
Працюємо з норм бюджетами і топовими аукціонами, тут обмежувати не буду.
Знаєш кого порекомендувати - пиши і отримай $1500 💸 за успішний найм!
дякую за шейр
Шукаю собі в команду майбутнього Head of PBN - прямий репортинг мені, нуль бюрократії та мікроменеджменту.
Компанія 10+ років на ринку, портфель 3000+ доменів, готова інфраструктура - база активів накопичена, купа автоматизацій, лінк-прогони вміємо робити автоматично і масовано.
Працюємо з норм бюджетами і топовими аукціонами, тут обмежувати не буду.
Знаєш кого порекомендувати - пиши і отримай $1500 💸 за успішний найм!
дякую за шейр
❤5🔥3🤝2
Forwarded from Я тестую: SEO та ШІ 🇺🇦
Чим витягувати дані з будь-якого сайту та як парсити за допомогою агентів
Насправді парсинг потрібен частіше, ніж здається: зібрати ціни конкурентів, додати статті у власну базу знань, передати щось агенту тощо.
Ось список інструментів, який варто зберегти.
Готові сервіси, які працюють із коробки
Відкриті бібліотеки, які можна встановити через агента
Коли сайт чинить опір
Насправді парсинг потрібен частіше, ніж здається: зібрати ціни конкурентів, додати статті у власну базу знань, передати щось агенту тощо.
Ось список інструментів, який варто зберегти.
Готові сервіси, які працюють із коробки
Firecrawl — https://firecrawl.dev/
Перетворює будь-яку сторінку, включно із JS-сайтами та PDF, на чистий markdown для моделі.
Jina AI Reader — https://jina.ai/reader/
Додаєте r.jina.ai перед посиланням і отримуєте чистий текст сторінки. Безкоштовний тариф досить щедрий.
Apify — https://apify.com/
Маркетплейс із 28 тисячами готових скраперів майже для будь-якого популярного сайту.
Thunderbit — https://thunderbit.com/
Розширення для Chrome, яке витягує дані зі сторінки у два кліки та відправляє їх у Sheets або Notion.
RSS.app — https://rss.app/
Перетворює сайти та соцмережі на RSS-стрічку з фільтрами й автопостингом у Telegram.
Відкриті бібліотеки, які можна встановити через агента
Crawl4AI — https://github.com/unclecode/crawl4ai
Популярний open source-скрапер, який одразу віддає сайт у markdown для моделі.
Browser Use — https://github.com/browser-use/browser-use
Агент керує браузером як людина: авторизується, клікає та збирає дані.
Crawlee — https://github.com/apify/crawlee
Фреймворк із ротацією проксі, повторними спробами та чергами, коли сторінок справді багато.
Scrapy — https://github.com/scrapy/scrapy
Промислова класика на Python для обходу мільйонів сторінок.
Scrapling — https://github.com/D4Vinci/Scrapling
Сам адаптується до змін верстки, тому ламається помітно рідше.
AutoScraper — https://github.com/alirezamika/autoscraper
Показуєте приклад потрібних даних — він сам знаходить шаблон і витягує решту.
Defuddle — https://github.com/kepano/defuddle
Очищає сторінку від реклами, меню та сайдбарів. Це рушій Obsidian Web Clipper.
Коли сайт чинить опір
curl_cffi — https://github.com/lexiforest/curl_cffi
Запити з відбитком справжнього браузера — простий спосіб зменшити ймовірність того, що запит буде розпізнаний як бот.
curl-impersonate — https://github.com/lwthiker/curl-impersonate
Схожий підхід на рівні curl, який використовується як рушій для curl_cffi.
CloakBrowser — https://github.com/CloakHQ/CloakBrowser
Заміна Playwright на модифікованому Chromium для роботи із сайтами з антибот-захистом.
invisible_playwright — https://github.com/feder-cr/invisible_playwright
Схожий підхід, але на базі Firefox.
Firecrawl
Supercharge your AI agents with data from the web and beyond.
Supercharge your AI agents with data from the web and beyond. Building the library for superintelligence. 🔥
1👍37🤝4🦄3👎2👀1😇1
Forwarded from SEO BAZA (Olesia Korobka)
Завтра середа! А це означає новий лайв! Поговоримо про RAG для SEO.
⏰ 26 серпня о 18:30
⠀
🟢 Що RAG реально дає SEO, а що йому просто приписують?
🟢 Чи потрібна векторна база конкретно вашому сайту?
🟢 Як RAG покращує контент, перелінковку й programmatic SEO?
🟢 Чи допомагає це потрапляти у відповіді LLM?
🟢 Як зібрати перший MVP без складної та дорогої архітектури?
⠀
В ефірі Саша Хілова, Віра Сєчкіна і Олеся Коробка.
⠀
На стрімі розіграємо квиток на SERP Conf від нашого спонсора Collaborator. Переможець сам обирає: Рим 16 жовтня або Відень 3 листопада.
⠀
Дивитися наживо на YouTube-каналі SEO BAZA.
⏰ 26 серпня о 18:30
⠀
⠀
В ефірі Саша Хілова, Віра Сєчкіна і Олеся Коробка.
⠀
На стрімі розіграємо квиток на SERP Conf від нашого спонсора Collaborator. Переможець сам обирає: Рим 16 жовтня або Відень 3 листопада.
⠀
Дивитися наживо на YouTube-каналі SEO BAZA.
Please open Telegram to view this post
VIEW IN TELEGRAM
YouTube
RAG для SEO. Що працює насправді?
Живий стрім 26 серпня о 18:30.
RAG: модель перед відповіддю дістає факти з вашої бази, а не вигадує з голови.
➖➖➖➖➖➖➖➖➖➖
🤝 Спонсор стріму — Collaborator
Collaborator — маркетплейс для PR та лінкбілдингу, де можна знайти перевірені сайти й Telegram-канали…
RAG: модель перед відповіддю дістає факти з вашої бази, а не вигадує з голови.
➖➖➖➖➖➖➖➖➖➖
🤝 Спонсор стріму — Collaborator
Collaborator — маркетплейс для PR та лінкбілдингу, де можна знайти перевірені сайти й Telegram-канали…
🔥19❤2👍2🤝1
SEO BAZA
Завтра середа! А це означає новий лайв! Поговоримо про RAG для SEO. ⏰ 26 серпня о 18:30 ⠀ 🟢 Що RAG реально дає SEO, а що йому просто приписують? 🟢 Чи потрібна векторна база конкретно вашому сайту? 🟢 Як RAG покращує контент, перелінковку й programmatic SEO?…
таблички то круто, але бази даних то вже справжній рок-н-ролл ✌
https://seobaza.com.ua/articles/vlasnyi-rag-dlia-seo-z-nulia
(обережно, пост викликає залежність від SQL з перших рядків)
https://seobaza.com.ua/articles/vlasnyi-rag-dlia-seo-z-nulia
(обережно, пост викликає залежність від SQL з перших рядків)
Please open Telegram to view this post
VIEW IN TELEGRAM
1❤17🍾3🔥1🥱1🤝1
Як не спалити квоту Ahrefs API на дроп-доменах
це я більше для себе, щоб не забути, а може і вам стане у нагоді
1. Пакетний ендпоінт замість одиночних запитів
/v3/site-explorer/metrics на один домен — 50 юнітів.
/v3/batch-analysis/batch-analysis — до 100 доменів за раз, 9 юнітів за домен.
Різниця в 5.5 раза на рівно тих самих даних.
2. Вартість залежить від кількості полів
Заміри на пачці зі 100:
• тільки DR → 2 юніти/домен
• DR + UR + dofollow backlinks + referring domains → 9 юнітів/домен
Тобто кожне зайве поле в select ви оплачуєте на кожному домені.
3. Головне: спершу питайте найдешевшу метрику
Якщо у вас є відсічка по DR — беріть спочатку тільки DR за 2 юніти, а повний набір лише тим, хто пройшов.
На дропах більшість доменів мають DR 0–4. Тобто ви платите повну ціну за домени, які відсіються на першому ж правилі.
Підсумок на 4153 доменах:
одразу все — 37 400 юнітів
спершу DR — 14 200 юнітів
здається може, що це не важливо, але коли ви парсите десятками тисяч, то кожен запит на вагу золота
продуктивного вам тижня🌟
це я більше для себе, щоб не забути, а може і вам стане у нагоді
1. Пакетний ендпоінт замість одиночних запитів
/v3/site-explorer/metrics на один домен — 50 юнітів.
/v3/batch-analysis/batch-analysis — до 100 доменів за раз, 9 юнітів за домен.
Різниця в 5.5 раза на рівно тих самих даних.
2. Вартість залежить від кількості полів
Заміри на пачці зі 100:
• тільки DR → 2 юніти/домен
• DR + UR + dofollow backlinks + referring domains → 9 юнітів/домен
Тобто кожне зайве поле в select ви оплачуєте на кожному домені.
3. Головне: спершу питайте найдешевшу метрику
Якщо у вас є відсічка по DR — беріть спочатку тільки DR за 2 юніти, а повний набір лише тим, хто пройшов.
На дропах більшість доменів мають DR 0–4. Тобто ви платите повну ціну за домени, які відсіються на першому ж правилі.
Підсумок на 4153 доменах:
одразу все — 37 400 юнітів
спершу DR — 14 200 юнітів
здається може, що це не важливо, але коли ви парсите десятками тисяч, то кожен запит на вагу золота
продуктивного вам тижня
Please open Telegram to view this post
VIEW IN TELEGRAM
2❤15👨💻4👍3🔥1🤓1🤝1
Завтра
о 17-00
говоримо про Fanout Query
1) що це взагалі та які типи підзапитів використовує AI
2) як їх знайти та
3) що з ними робити
https://www.youtube.com/watch?v=3LtuRVC1WcE
Додати в календар - тиць
до зустрічі 🐸🥁🐝
о 17-00
говоримо про Fanout Query
1) що це взагалі та які типи підзапитів використовує AI
2) як їх знайти та
3) що з ними робити
https://www.youtube.com/watch?v=3LtuRVC1WcE
Додати в календар - тиць
до зустрічі 🐸🥁🐝
YouTube
Fanout Query або запити fanout - як знайти і що далі робити
Живий стрім 9 вересня о 17:00.
1) що це взагалі та які типи підзапитів використовує AI
2) як їх знайти та
3) що з ними робити
➖➖➖➖➖➖➖➖➖➖
Спонсор стріму — Collaborator
Collaborator — маркетплейс для PR та лінкбілдингу, де можна знайти перевірені сайти…
1) що це взагалі та які типи підзапитів використовує AI
2) як їх знайти та
3) що з ними робити
➖➖➖➖➖➖➖➖➖➖
Спонсор стріму — Collaborator
Collaborator — маркетплейс для PR та лінкбілдингу, де можна знайти перевірені сайти…
👍5🤝4❤1👨💻1🫡1
K2 Affiliates дуже заморочились і створили міні курс для сеошників-початківців, які дуже хочуть розібратись в IGaming
все дуже зрозуміло, все простими словами, все як ви любите🫶
щиро раджу подивитись для розуміння ніші
https://www.youtube.com/@K2Affiliates
(лайк окремо за барабанні партії на фоні)
все дуже зрозуміло, все простими словами, все як ви любите
щиро раджу подивитись для розуміння ніші
https://www.youtube.com/@K2Affiliates
(лайк окремо за барабанні партії на фоні)
Please open Telegram to view this post
VIEW IN TELEGRAM
❤10🤝10
Forwarded from SEO BAZA (Olesia Korobka)
Збір на роту в 411 бригаді Яструби.
⠀
Рота розгортається і вже виконує спеціальні завдання на Запоріжжі. Там зібралась одна з найфаховіших команд, і це не для красного слівця. Ініціатива Софії, нашої підписниці і дуже класної SEOшниці: до мобілізації вона була тімлідеркою SEO, зараз служить, до Запоріжжя був Донбас.
⠀
Софія написала нам сама і спитала, чи можна взяти участь у благодійній прожарці, щоб залучити донати в підрозділ. Ми вирішили, що людина на бойових завданнях не має ще й працювати заради донатів. Давайте спробуємо зібрати без прожарок. Закиньте в банку, скільки зручно, і перешліть пост колегам.
⠀
Збір веде Надя: у неї офіційно зареєстрований волонтерський рахунок, усі покупки на підрозділ офіційні, з документами, і про кожну вона звітує в Instagram.
⠀
🟢 Банка: https://send.monobank.ua/jar/8nacjrPTZs
⠀
Рота розгортається і вже виконує спеціальні завдання на Запоріжжі. Там зібралась одна з найфаховіших команд, і це не для красного слівця. Ініціатива Софії, нашої підписниці і дуже класної SEOшниці: до мобілізації вона була тімлідеркою SEO, зараз служить, до Запоріжжя був Донбас.
⠀
Софія написала нам сама і спитала, чи можна взяти участь у благодійній прожарці, щоб залучити донати в підрозділ. Ми вирішили, що людина на бойових завданнях не має ще й працювати заради донатів. Давайте спробуємо зібрати без прожарок. Закиньте в банку, скільки зручно, і перешліть пост колегам.
⠀
Збір веде Надя: у неї офіційно зареєстрований волонтерський рахунок, усі покупки на підрозділ офіційні, з документами, і про кожну вона звітує в Instagram.
⠀
Please open Telegram to view this post
VIEW IN TELEGRAM
❤7🤝4👎3🕊1🌭1
Please open Telegram to view this post
VIEW IN TELEGRAM
YouTube
SynthID
SynthID для SEOшників. Спробуємо розібратися всі разом.
Живий стрім 7 жовтня о 17:00.
➖➖➖➖➖➖➖➖➖➖
Спонсор стріму — Collaborator
30 жовтня X SEO-конференція Collaborator — безкоштовний онлайн-івент для SEO-фахівців.
10 доповідей про AI та LLM, контент…
Живий стрім 7 жовтня о 17:00.
➖➖➖➖➖➖➖➖➖➖
Спонсор стріму — Collaborator
30 жовтня X SEO-конференція Collaborator — безкоштовний онлайн-івент для SEO-фахівців.
10 доповідей про AI та LLM, контент…
🔥7🤝5
Forwarded from що за шум? (Yaroslav Beshta)
Зробив собі на AI міні-аналізатор логів сайту. Назвав LogLens SEO 👀
Одразу скажу: будувати конкурента Screaming Frog чи JetOctopus я не збираюсь. Була конкретна ціль: завантажити логи й нормально подивитися, як боти ходять сайтом, що сканують і де виникають проблеми.
Що вже вміє:
• Підтягує логи з CSV, зокрема з вкладеним JSON. Є налаштування відповідності полів, щоб підлаштувати імпорт під свій формат.
• Показує активність Googlebot, Bingbot, GPTBot, ClaudeBot та інших ботів.
• Дає подивитися частоту обходу URL: куди боти заходять постійно, а куди давно не поверталися.
• Показує редиректи, помилки 4xx/5xx і сторінки, які віддають то 200, то 404.
• Розкладає краулінг по розділах сайту, параметрах URL і типах ресурсів.
• Допомагає знайти повільні URL, якщо в логах є час відповіді.
• Дозволяє створювати свої сегменти та правила, зокрема визначати, який краулінг вважати корисним, а який потенційно зайвим.
• Зіставляє IP ботів, що представляються Googlebot або Bingbot, з офіційними діапазонами.
Усе це з фільтрами, графіками й можливістю провалитися до конкретного URL або запису в логах.
Працює локально на комп’ютері. Без акаунтів, підписок і завантаження своїх логів у сторонній сервіс. Для знайомства є демодані, а в репозиторії є інструкція запуску.
Для мене це ще один приклад, як за допомогою AI можна зробити інструмент під конкретну робочу задачу.
Може, колись покращу цей продукт 😂 Але це не точно. Якщо є питання, покращення пишіть - @mrfanatik
PS> Якщо вам супер лінь розбиратись, кидайте гіт клоду, він вам все поставить і запустить)
Код тут, якщо хочете покрутити:
https://github.com/fanatikya/loglens-seo
Одразу скажу: будувати конкурента Screaming Frog чи JetOctopus я не збираюсь. Була конкретна ціль: завантажити логи й нормально подивитися, як боти ходять сайтом, що сканують і де виникають проблеми.
Що вже вміє:
• Підтягує логи з CSV, зокрема з вкладеним JSON. Є налаштування відповідності полів, щоб підлаштувати імпорт під свій формат.
• Показує активність Googlebot, Bingbot, GPTBot, ClaudeBot та інших ботів.
• Дає подивитися частоту обходу URL: куди боти заходять постійно, а куди давно не поверталися.
• Показує редиректи, помилки 4xx/5xx і сторінки, які віддають то 200, то 404.
• Розкладає краулінг по розділах сайту, параметрах URL і типах ресурсів.
• Допомагає знайти повільні URL, якщо в логах є час відповіді.
• Дозволяє створювати свої сегменти та правила, зокрема визначати, який краулінг вважати корисним, а який потенційно зайвим.
• Зіставляє IP ботів, що представляються Googlebot або Bingbot, з офіційними діапазонами.
Усе це з фільтрами, графіками й можливістю провалитися до конкретного URL або запису в логах.
Працює локально на комп’ютері. Без акаунтів, підписок і завантаження своїх логів у сторонній сервіс. Для знайомства є демодані, а в репозиторії є інструкція запуску.
Для мене це ще один приклад, як за допомогою AI можна зробити інструмент під конкретну робочу задачу.
Може, колись покращу цей продукт 😂 Але це не точно. Якщо є питання, покращення пишіть - @mrfanatik
PS> Якщо вам супер лінь розбиратись, кидайте гіт клоду, він вам все поставить і запустить)
Код тут, якщо хочете покрутити:
https://github.com/fanatikya/loglens-seo
👍18🔥4❤3🤝1