Перевірка URL-адреси на Java

Мені хотілося знати, чи є в Java якісь стандартні API для перевірки заданої URL-адреси? Я хочу перевірити, чи правильно вказано рядок URL-адреси, тобто даний протокол є дійсним, а потім перевірити, чи можна встановити з'єднання.

Я спробував використовувати HttpURLConnection, вказавши URL-адресу та підключившись до неї. Перша частина моєї вимоги, схоже, виконана, але коли я намагаюся виконати HttpURLConnection.connect (), викидається виняток 'java.net.ConnectException: З'єднання відхилено'.

Це може бути через налаштування проксі-сервера? Я спробував встановити властивості системи для проксі, але успіху не було.

Дайте мені знати, що я роблю неправильно.

На користь спільноти, оскільки ця тема є найпопулярнішою в Google під час пошуку
" url validator java "

Ловлячи винятки дорого, і їх слід уникати, коли це можливо. Якщо ви просто хочете перевірити, що ваш рядок є дійсною URL-адресою, ви можете використовувати клас UrlValidator з проекту Apache Commons Validator .

Наприклад:

String[] schemes = {"http","https"}; // DEFAULT schemes = "http", "https", "ftp"
UrlValidator urlValidator = new UrlValidator(schemes);
if (urlValidator.isValid("ftp://foo.bar.com/")) {
   System.out.println("URL is valid");
} else {
   System.out.println("URL is invalid");
}

Вам потрібно створити і URLоб’єкт, і URLConnectionоб’єкт. Наступний код перевірятиме формат URL-адреси та чи можна встановити з'єднання:

try {
    URL url = new URL("http://www.yoursite.com/");
    URLConnection conn = url.openConnection();
    conn.connect();
} catch (MalformedURLException e) {
    // the URL is not in a valid form
} catch (IOException e) {
    // the connection couldn't be established
}

java.net.URLКлас насправді не зовсім хороший спосіб перевірки URL - адреси. MalformedURLExceptionце НЕ викинутий на все потворну URL , під час будівництва. Ловля IOExceptionна java.net.URL#openConnection().connect()не перевіряє URL або, тільки сказати кастрований баран або не може бути встановлено з'єднання.

Розглянемо цей фрагмент коду:

    try {
        new URL("http://.com");
        new URL("http://com.");
        new URL("http:// ");
        new URL("ftp://::::@example.com");
    } catch (MalformedURLException malformedURLException) {
        malformedURLException.printStackTrace();
    }

.. який не кидає жодних винятків.

Я рекомендую використовувати якийсь API перевірки, реалізований за допомогою граматики без контексту, або в дуже спрощеній валідації просто використовувати регулярні вирази. Однак мені потрібно, щоб хтось запропонував для цього вищий або стандартний API, я нещодавно сам почав його шукати.

Примітка. Припустимо, що URL#toURI()в поєднанні з обробкою винятку java.net. URISyntaxExceptionможе полегшити перевірку URL-адрес. Однак, цей метод вловлює лише один із найпростіших випадків, описаних вище.

Висновок полягає в тому, що не існує стандартного аналізатора URL-адрес Java для перевірки URL-адрес.

Використовуючи лише стандартний API, передайте рядок URLоб'єкту, а потім перетворіть його в URIоб'єкт. Це дозволить точно визначити дійсність URL-адреси відповідно до стандарту RFC2396.

Приклад:

public boolean isValidURL(String url) {

    try {
        new URL(url).toURI();
    } catch (MalformedURLException | URISyntaxException e) {
        return false;
    }

    return true;
}

Використовуйте android.webkit.URLUtilна android:

URLUtil.isValidUrl(URL_STRING);

Примітка. Це лише перевірка початкової схеми URL-адреси, а не те, що вся URL-адреса є дійсною.

Існує спосіб провести перевірку URL-адрес у суворій відповідності стандартам Java, не звертаючись до сторонніх бібліотек:

boolean isValidURL(String url) {
  try {
    new URI(url).parseServerAuthority();
    return true;
  } catch (URISyntaxException e) {
    return false;
  }
}

Конструктор URIперевіряє, urlчи є дійсним URI, і закликає parseServerAuthorityгарантувати, що це URL-адреса (абсолютна чи відносна), а не URN.

Важливо лише зазначити, що об’єкт URL обробляє і перевірку, і з'єднання. Тоді є лише протоколи, для яких надано обробник на sun.net.www.protocol ( файл , ftp , gopher , http , https , jar , mailto , netdoc ) є дійсними. Наприклад, спробуйте створити нову URL-адресу з протоколом ldap :

new URL("ldap://myhost:389")

Ви отримаєте java.net.MalformedURLException: unknown protocol: ldap.

Вам потрібно реалізувати власний обробник і зареєструвати його через нього URL.setURLStreamHandlerFactory(). Досить зайве, якщо ви просто хочете перевірити синтаксис URL, повторне вираження здається більш простим рішенням.

Ви впевнені, що використовуєте правильний проксі як властивості системи?

Також якщо ви використовуєте 1.5 або 1.6, ви можете передати екземпляр java.net.Proxy методу openConnection (). Це більш елегантний imo:

//Proxy instance, proxy ip = 10.0.0.1 with port 8080
Proxy proxy = new Proxy(Proxy.Type.HTTP, new InetSocketAddress("10.0.0.1", 8080));
conn = new URL(urlString).openConnection(proxy);

Я думаю, що найкраща відповідь - від користувача @ b1nary.atr0phy. Якимось чином рекомендую поєднати метод із відповіді b1nay.atr0phy з регулярним виразом, щоб охопити всі можливі випадки.

public static final URL validateURL(String url, Logger logger) {

        URL u = null;
        try {  
            Pattern regex = Pattern.compile("(?i)^(?:(?:https?|ftp)://)(?:\\S+(?::\\S*)?@)?(?:(?!(?:10|127)(?:\\.\\d{1,3}){3})(?!(?:169\\.254|192\\.168)(?:\\.\\d{1,3}){2})(?!172\\.(?:1[6-9]|2\\d|3[0-1])(?:\\.\\d{1,3}){2})(?:[1-9]\\d?|1\\d\\d|2[01]\\d|22[0-3])(?:\\.(?:1?\\d{1,2}|2[0-4]\\d|25[0-5])){2}(?:\\.(?:[1-9]\\d?|1\\d\\d|2[0-4]\\d|25[0-4]))|(?:(?:[a-z\\u00a1-\\uffff0-9]-*)*[a-z\\u00a1-\\uffff0-9]+)(?:\\.(?:[a-z\\u00a1-\\uffff0-9]-*)*[a-z\\u00a1-\\uffff0-9]+)*(?:\\.(?:[a-z\\u00a1-\\uffff]{2,}))\\.?)(?::\\d{2,5})?(?:[/?#]\\S*)?$");
            Matcher matcher = regex.matcher(url);
            if(!matcher.find()) {
                throw new URISyntaxException(url, "La url no está formada correctamente.");
            }
            u = new URL(url);  
            u.toURI(); 
        } catch (MalformedURLException e) {  
            logger.error("La url no está formada correctamente.");
        } catch (URISyntaxException e) {  
            logger.error("La url no está formada correctamente.");  
        }  

        return u;  

    }

Дякую. Відкриття URL-зв’язку шляхом передачі проксі, як запропонував NickDK, працює чудово.

//Proxy instance, proxy ip = 10.0.0.1 with port 8080
Proxy proxy = new Proxy(Proxy.Type.HTTP, new InetSocketAddress("10.0.0.1", 8080));
conn = new URL(urlString).openConnection(proxy);

Однак властивості системи не працюють, як я згадував раніше.

Знову дякую.

З повагою, Кея