User-agent: Googlebot Disallow: /ua/board/? Disallow: /ru/board/? Disallow: /ua/board/tag- Disallow: /ru/board/tag- Disallow: /ua/companies/? Disallow: /ru/companies/? Disallow: /ua/companies/c- Disallow: /ua/settings/ Disallow: /ru/settings/ Disallow: /ua/office/ Disallow: /ru/office/ Disallow: /files/ Disallow: /cache/ Disallow: /logs/ Disallow: /templates/ Disallow: /imgs/zzz/ Disallow: /*? User-agent: Mediapartners-Google Disallow: /files/ Disallow: /cache/ Disallow: /imgs/zzz/ Disallow: /templates/ User-agent: Yandex Disallow: /ua/board/? Disallow: /ru/board/? Disallow: /ua/board/tag- Disallow: /ru/board/tag- Disallow: /ua/companies/? Disallow: /ru/companies/? Disallow: /ua/companies/c- Disallow: /ua/settings/ Disallow: /ru/settings/ Disallow: /ua/office/ Disallow: /ru/office/ Disallow: /files/ Disallow: /cache/ Disallow: /logs/ Disallow: /templates/ Disallow: /imgs/zzz/ Disallow: /*? Host: agrotorg.net User-agent: YandexDirect Disallow: /files/ Disallow: /cache/ Disallow: /imgs/zzz/ User-agent: Slurp Disallow: /ua/board/? Disallow: /ru/board/? Disallow: /ua/board/tag- Disallow: /ru/board/tag- Disallow: /ua/companies/? Disallow: /ru/companies/? Disallow: /ua/companies/c- Disallow: /ua/settings/ Disallow: /ru/settings/ Disallow: /ua/office/ Disallow: /ru/office/ Disallow: /ua/users/ Disallow: /ru/users/ Disallow: /files/ Disallow: /cache/ Disallow: /logs/ Disallow: /imgs/zzz/ Disallow: /templates/ Disallow: /*? Crawl-delay: 3 User-agent: * Disallow: /ua/board/? Disallow: /ru/board/? Disallow: /ua/board/tag- Disallow: /ru/board/tag- Disallow: /ua/companies/? Disallow: /ru/companies/? Disallow: /ua/companies/c- Disallow: /ua/settings/ Disallow: /ru/settings/ Disallow: /ua/office/ Disallow: /ru/office/ Disallow: /ua/users/ Disallow: /ru/users/ Disallow: /files/ Disallow: /cache/ Disallow: /logs/ Disallow: /imgs/zzz/ Disallow: /templates/ Disallow: /*? User-agent: SemrushBot Disallow: / User-agent: SemrushBot-SA Disallow: / User-agent: AhrefsBot Disallow: / User-agent: AlphaSeoBot Disallow: / User-agent: AlphaSeoBot-SA Disallow: / User-agent: BLEXBot Disallow: / User-agent: PetalBot Disallow: /