Я отримую SocketTimeoutException в Jsoup: Читання вичерпано

Я отримую SocketTimeoutException, коли намагаюся розбирати багато документів HTML за допомогою Jsoup.
Наприклад, я отримав список посилань:

<a href="www.domain.com/url1.html">link1</a>
<a href="www.domain.com/url2.html">link2</a>
<a href="www.domain.com/url3.html">link3</a>
<a href="www.domain.com/url4.html">link4</a>

Для кожного посилання я розбираю документ, пов'язаний з URL-адресою (з атрибуту href), щоб отримати інші відомості на цих сторінках.
Тож я можу собі уявити, що це займає багато часу, але як відключити цей виняток?
Ось весь слід стека:

java.net.SocketTimeoutException: Read timed out
    at java.net.SocketInputStream.socketRead0(Native Method)
    at java.net.SocketInputStream.read(Unknown Source)
    at java.io.BufferedInputStream.fill(Unknown Source)
    at java.io.BufferedInputStream.read1(Unknown Source)
    at java.io.BufferedInputStream.read(Unknown Source)
    at sun.net.www.http.HttpClient.parseHTTPHeader(Unknown Source)
    at sun.net.www.http.HttpClient.parseHTTP(Unknown Source)
    at sun.net.www.protocol.http.HttpURLConnection.getInputStream(Unknown Source)
    at java.net.HttpURLConnection.getResponseCode(Unknown Source)
    at org.jsoup.helper.HttpConnection$Response.execute(HttpConnection.java:381)
    at org.jsoup.helper.HttpConnection$Response.execute(HttpConnection.java:364)
    at org.jsoup.helper.HttpConnection.execute(HttpConnection.java:143)
    at org.jsoup.helper.HttpConnection.get(HttpConnection.java:132)
    at app.ForumCrawler.crawl(ForumCrawler.java:50)
    at Main.main(Main.java:15)

Дякую друзям!

EDIT: Гум ... Вибачте, щойно знайшли рішення:

Jsoup.connect(url).timeout(0).get();

Сподіваюся, що може бути корисним для когось іншого ... :)

Я думаю, ти можеш зробити

Jsoup.connect("...").timeout(10 * 1000).get(); 

який встановлює час очікування на 10s.

Гаразд - так, я намагався запропонувати це як редагування відповіді MarcoS, але редакцію було відхилено. Тим не менш, наступна інформація може бути корисна майбутнім відвідувачам:

Згідно з javadocs , час очікування за замовчуванням протягом org.jsoup.Connection30 секунд.

Як вже було сказано, це можна встановити, використовуючи timeout(int millis)

Також, як зазначає ОП у редагуванні, це також можна встановити, використовуючи timeout(0). Однак, як заявляє javadocs:

Час очікування нуля трактується як нескінченний тайм-аут.

На https://jsoup.org/apidocs/org/jsoup/Connection.html є помилка . Час очікування за замовчуванням не становить 30 секунд. Це 3 секунди. Подивіться на javadoc у кодах. Це говорить 3000 мс.

У мене була така ж помилка:

java.net.SocketTimeoutException: Read timed out
    at java.net.SocketInputStream.socketRead0(Native Method)
    at java.net.SocketInputStream.socketRead(SocketInputStream.java:116)
    at java.net.SocketInputStream.read(SocketInputStream.java:171)
    at java.net.SocketInputStream.read(SocketInputStream.java:141)

і тільки налаштування .userAgent(Opera)працювало для мене.

Тому я використовував Connection userAgent(String userAgent)метод класу Connection, щоб встановити користувальницький агент Jsoup.

Щось на зразок:

Jsoup.connect("link").userAgent("Opera").get();

Це повинно працювати: Jsoup.connect(url.toLowerCase()).timeout(0);.

Встановіть тайм-аут під час з'єднання з jsoup.