# -------------------------------------- # robots.txt for shigotomarugoto.info # updated: 2022.07.27 # -------------------------------------- # 百度(バイドゥ/Baidu)(中国)「Baiduspider」 User-agent: baiduspider Disallow: / # 捜狗(ソーゴウ)(中国)「Sogou」 User-agent: Sogou web spider Disallow: / User-Agent: 360Spider Disallow: / # NAVER(韓国)「Yeti」 User-Agent: Yeti Disallow: / # Yandex(ロシア)「Yandex」 User-agent: Yandex Disallow: / # CocCoc(ベトナム)「coccocbot」 User-agent: coccocbot Disallow: / User-agent: coccocbot-web User-agent: coccocbot-image Disallow: / # セズナム(チェコ)「SeznamBot」 User-agent: SeznamBot Disallow: / # MJ12bot(イギリス, SEOサービス) User-agent: MJ12bot Disallow: / # PetalBot(中国, 検索エンジン) User-agent: PetalBot Disallow: / # SemrushBot(ドミニカ, SEOサービス) User-agent: SemrushBot Disallow: / # AhrefsBot(シンガポール, SEOサービス) User-agent: AhrefsBot Disallow: / # DotBot(アメリカ, SEO,サイト分析) User-Agent: dotbot Disallow: / # ltx71(不明, http://ltx71.com/) User-agent: ltx71 - (http://ltx71.com/) Disallow: / # Barkrowler(フランス, SEOサービス) User-agent: Barkrowler Disallow:/ # Cincraw(不明, ttp://cincrawdata.net/bot/) User-agent: Cincraw Disallow:/ # BLEXBot(SEOサービスWebMeUp, ttp://webmeup-crawler.com/) User-agent: BLEXBot Disallow: / # ZoomInfo Crawler(アメリカ, SaaS) User-agent: Zoominfobot Disallow: / # Mail.RU_Bot(ロシア, 検索サイト) User-agent: Mail.RU_Bot Disallow: / # special_archiver(ttps://archive.org/) User-agent: special_archiver Disallow: / # YaK(フランス, ttp://linkfluence.com/) User-agent: YaK Disallow: / # CCBot(検索/分析) User-agent: CCBot Disallow: / # SEOkicks(検索サイト ttps://www.seokicks.de/) User-agent: SEOkicks-Robot Disallow: / User-agent: SEOkicks Disallow: / # Adsbot/3.1(SEO ttps://seostar.co/robot/) User-agent: adsbot Disallow: / # Babbar's bot(SEO ttps://babbar.tech/crawler) User-agent: Barkrowler Disallow: / # 不明、その他 User-agent: evc-batch/2.0 Disallow: / # Other ALL User-Agent: * Disallow: /admin-manager/ Disallow: /cmsdesigner/ Disallow: /files/20201013/