Перевірка здоров'я веб-сторінки за допомогою curl

Я хотів би зробити перевірку стану здоров’я служби, зателефонувавши на конкретну URL-адресу. Здається, найпростішим рішенням буде використовувати cron для перевірки щохвилини або близько того. У разі помилок, cron надсилає мені електронний лист.

Я спробував використовувати cUrl для цього, але не можу змусити його виводити повідомлення лише на помилках. Якщо я спробую направити вихід на / dev / null, він виводить звіт про хід роботи.

  % Total    % Received % Xferd  Average Speed   Time    Time     Time  Current
                                 Dload  Upload   Total   Spent    Left  Speed
100  5559  100  5559    0     0   100k      0 --:--:-- --:--:-- --:--:--  106k

Я спробував розглянути варіанти завивки, але я просто не можу знайти нічого, що підходить для ситуації, коли ви хочете, щоб він мовчав на успіх, але шумів на помилках.

Чи є спосіб змусити завиток робити те, що я хочу, чи є якийсь інший інструмент, на який я повинен дивитись?

Про що -sSf? З чоловічої сторінки:

  -s/--silent
     Silent or quiet mode. Do not show progress meter or error messages.  
     Makes Curl mute.

  -S/--show-error
     When used with -s it makes curl show an error message if it fails.

  -f/--fail
     (HTTP)  Fail silently (no output at all) on server errors. This is mostly
     done to better enable scripts etc to better deal with failed attempts. In
     normal  cases  when a HTTP server fails to deliver a document, it returns
     an HTML document stating so (which often also describes  why  and  more).
     This flag will prevent curl from outputting that and return error 22.

     This method is not fail-safe and there are occasions where non-successful
     response codes will  slip  through,  especially  when  authentication  is
     involved (response codes 401 and 407).

Наприклад:

curl -sSf http://example.org > /dev/null

Я думаю, що для найпростішого способу перевірити, чи сайт живий, ви можете скористатися наступним методом:

curl -Is http://www.google.com | head -n 1

Це повернеться HTTP/1.1 200 OK. Якщо повернення не відповідає вашому результату, тоді телефонуйте за допомогою.

Вам потрібен -sпрапор (беззвучний), -fпрапор (невдача з кодом виходу при помилці) і ви можете використовувати -oпрапор для перенаправлення виводу:

curl www.websiteToTest.com -s -f -o /dev/null || echo "Website down." | mail -s "Website is down" admin@thesite.com 

Це лише поганий приклад для простого сценарію cron. Зазвичай ви хочете отримати лише одну пошту, якщо веб-сайт не працює.

ви можете зафіксувати статистику мережевих синхронізацій від завитка. затримки кожної фази в циклі запит / відповідь можуть бути корисними для визначення стану здоров'я.

$ URL=https://example.com
$ curl "$URL" -s -o /dev/null -w \
> "response_code: %{http_code}\n
> dns_time: %{time_namelookup}
> connect_time: %{time_connect}
> pretransfer_time: %{time_pretransfer}
> starttransfer_time: %{time_starttransfer}
> total_time: %{time_total}
> "
response_code: 200

dns_time: 0.029
connect_time: 0.046
pretransfer_time: 0.203
starttransfer_time: 0.212
total_time: 0.212

Цей спосіб допоможе вам при спробі протестувати сайт при наявності https:

#!/bin/bash
# put your domain in this var
https=https://www.somewebsite.com

# save the status in some variable 
status=`curl $https -k -s -f -o /dev/null && echo "SUCCESS" || echo "ERROR"`    

# print results (or use it in your scripts)
echo "testing $https=$status"

Нещодавно мене попросили придумати щось, що б більше нагадувало витончене серцебиття.

for i in `curl -s -L cnn.com |egrep --only-matching "http(s?):\/\/[^ \"\(\)\<\>]*" | uniq` ; do curl -s -I $i 2>/dev/null |head -n 1 | cut -d$' ' -f2; done

Або розширений для трохи читабельності,

for i in $(curl -s -L cnn.com |egrep --only-matching 'http(s?):\/\/[^ \"\(\)\<\>]*' | uniq)
do
    curl -s -I "$i" 2>/dev/null | head -n 1 | cut -d' ' -f2
done

Що я зробив, curlце веб-сайт, який розбирав усі посилання з html, а потім curlті, які аналізували посилання, виводячи лише код статусу. Тоді я б шукав коди статусу http> = 400, щоб знайти помилки.

Відповідь:

#!/bin/bash -eu
timeout 3s curl -fIsS http://example.org > /dev/null
# and if you have TLS (https), check if it's about to expire:
true | openssl s_client -connect example.org:443 2>/dev/null | openssl x509 -noout -checkend "$((3600*24*20))"

Пояснення:

• timeout 3sвстановить тривалісний тайм-аут для вашого запиту. Відповідь повільніше вважається "не здоровою"
• -fпрапор згортання не вдасться рано, -Sпокаже помилки, -sпридушить нормальний вихід, -Iотримає лише заголовки HTTP, а не вміст. (Як завжди, більш детальна інформація доступна в man curlкоманді.)
• -checkendДиректива openssl перевіряє терміни придатності сертифіката. У моєму прикладі це 20 днів (вказано в секундах).

У Curl є дуже конкретні коди статусу виходу
Чому б не просто перевірити їх?

#!/bin/bash

##name: site-status.sh

FAIL_CODE=6

check_status(){
    LRED="\033[1;31m" # Light Red
    LGREEN="\033[1;32m" # Light Green
    NC='\033[0m' # No Color


    curl -sf "${1}" > /dev/null

    if [ ! $? = ${FAIL_CODE} ];then
        echo -e "${LGREEN}${1} is online${NC}"
    else
        echo -e "${LRED}${1} is down${NC}"
    fi
}


check_status "${1}"

Використання:

$ site-status.sh example.com

Результат:

$ example.com is online

Примітки:

Цей скрипт перевіряє, чи сайт може бути вирішений.

Цей код повинен отримати вас, якщо все, що вам цікаво, - це веб-сайт вгору або вниз.
Однак якщо ви внесете кілька змін до блоку if / else, ви можете легко перевірити наявність інших кодів статусу, якщо бажаєте