Есть возможность выбора ботов Google, Bing, также можно указать своего юзерагента.
robots.txt Testing & Validation Tool
https://tamethebots.com/tools/robotstxt-checker
Михаил Шакин, @burzhunet #freeseotools #техническоеseo
Please open Telegram to view this post
VIEW IN TELEGRAM
Tame The Bots
robots.txt Testing Tool
Test a list of URLs against a live or custom robots.txt file, using Google's open source parser.
Генерирует основные типы разметки.
https://schemagenerator.app/
Михаил Шакин, @burzhunet #микроразметка #freeseotools #техническоеseo #бесплатно
Please open Telegram to view this post
VIEW IN TELEGRAM
schemagenerator.app
Schema Generator - Generate JSON-LD Schema Markup for SEO
Generate ready-to-copy JSON-LD schema markup for your website to improve SEO rankings in a few clicks.