1 Чи можемо ми використовувати регекс у файлі robots.txt для блокування URL-адрес? У мене є кілька динамічно створених URL-адрес. Чи можу я використовувати регекс для блокування цих URL-адрес у файлі robots.txt? 23 robots.txt regular-expression