Главная Обзор Помощь
Вход
universai
/
masyunis
1
0
Ответвить 0
Файлы Задачи 0 Запросы на слияние 0 Вики
Дерево: 37107940ef
Ветки Метки
masyunis
/
cmd
/
robots2policy
/
testdata
/
simple.robots.txt

simple.robots.txt 90 B
История Исходник

12345 
  1. # Simple robots.txt test
    2. 

  2. User-agent: *
    3. 

  3. Disallow: /admin/
    4. 

  4. Disallow: /private
    5. 

  5. Allow: /public
    6.