Як встановити robots.txt глобально в nginx для всіх віртуальних хостів

Я намагаюся встановити robots.txtдля всіх віртуальних хостів під nginx http-сервером. Я зміг зробити це в Apache, поставивши наступне в основному httpd.conf:

<Location "/robots.txt">
    SetHandler None
</Location>
Alias /robots.txt /var/www/html/robots.txt

Я спробував зробити щось подібне з nginx, додавши рядки, наведені нижче (а) в межах nginx.conf і (b), як включають conf.d / robots.conf

location ^~ /robots.txt {
        alias /var/www/html/robots.txt;
}

Я спробував з '=' і навіть помістив його в один з віртуальних хостів, щоб перевірити його. Начебто нічого не спрацювало.

Що я тут пропускаю? Чи є інший спосіб досягти цього?

місце розташування не можна використовувати всередині httpблоку. nginx не має глобальних псевдонімів (тобто псевдонімів, які можна визначити для всіх vhosts). Збережіть свої глобальні визначення у папці та включіть їх.

server {
  listen 80;
  root /var/www/html;
  include /etc/nginx/global.d/*.conf;
}

Ви можете встановити вміст файлу robots.txt безпосередньо в конфігурації nginx:

    location = /robots.txt { return 200 "User-agent: *\nDisallow: /\n"; }

Можна також додати правильний тип вмісту:

    location = /robots.txt {
       add_header Content-Type text/plain;
       return 200 "User-agent: *\nDisallow: /\n";
    }

Чи є інші правила, які визначені? Можливо common.conf або інший конф-файл у включеному, який переробляє конфігурацію. Одне з наступних обов'язково має спрацювати.

location /robots.txt { alias /home/www/html/robots.txt; }
location /robots.txt { root /home/www/html/;  }

1. Nginx виконує всі місця "regexp" у порядку їх появи. Якщо будь-яке місце "regexp" вдалося, Nginx використає цей перший збіг. Якщо жодного місця "regexp" не вдалося, Nginx використовує звичайне місце, знайдене на попередньому кроці.
2. "regexp" місця мають перевагу над "префіксами"

У мене був такий самий випадок із викликами акме, але той самий принцип стосується і вашої справи.

Що я зробив, щоб вирішити цю проблему, це перемістити всі мої сайти на нестандартний порт, я вибрав 8081і створив віртуальний сервер, який прослуховує порт 80. Він надає прокси всім запитам 127.0.0.1:8081, окрім тих, до яких добре знають. Це діє майже як глобальний псевдонім, з одним додатковим стрибком, але це не повинно спричинити значного зниження продуктивності через асинхронний характер nginx.

upstream nonacme {
  server 127.0.0.1:8081;
}

server {
  listen 80;

  access_log  /var/log/nginx/acme-access.log;
  error_log   /var/log/nginx/acme-error.log;

  location /.well-known {
    root /var/www/acme;
  }

  location / {
    proxy_set_header    Host                $http_host;
    proxy_set_header    X-Real-IP           $remote_addr;
    proxy_set_header    X-Forwarded-For     $proxy_add_x_forwarded_for;
    proxy_set_header    X-Forwarded-Proto   $scheme;
    proxy_set_header    X-Frame-Options     SAMEORIGIN;

    # WebSocket support (nginx 1.4)
    proxy_http_version 1.1;
    proxy_set_header Upgrade $http_upgrade;
    proxy_set_header Connection "upgrade";

    proxy_pass http://nonacme;
  }
}