Як Google знаходить домен без посилань на нього?

Нещодавно я зареєстрував новий домен, вказав його на свій існуючий сервер і створив мінімальну сторінку, просто сказавши "тестувати" та нічого іншого.

Я щойно дізнався сьогодні, що сторінка вже індексується в Google! На сайт немає посилань (я навіть нікому не розповідав про домен, оскільки я ще нічого з цим не робив).

Чи гуляє Google записи WHOIS чи щось таке?

search-engine-indexing domain-registration web-crawlers

— Невдоволений козак
джерело

Ви впевнені, що не зробили щось, що може якось автоматично відкрити URL-адресу, наприклад, згадати його в електронному листі до списку (який може бути повторно опублікований), переглядати звідти на іншому веб-сайті, який може мати публічні журнали або віджет реферера тощо?

— Су

@Не мені відомо. Я ледве навіть не завітав на сайт після того, як я закинув тестову сторінку.

— НезадоволенеЗакриття

@TRiG Я вже згадував, що те саме питання існує, але ідеальної відповіді немає, тому я запитав.

— шешадрі

Ви нічого не зробили, щоб це питання було інакшим. Це точно таке саме питання.

— TRiG

@TRiG Так, питання те саме, але на це питання немає ідеальної відповіді.

— шешадрі

Відповіді:

Вони є реєстратором . Я не бачу, чому вони не могли використовувати його для пошуку нових сайтів для індексації.

— Джон Конде
джерело

Так, мені подобається абзац у цій статті, який чує, що вони створюють веб-браузер та операційну систему! У будь-якому випадку ваша відповідь здається логічною: щоб бути реєстратором, ви повинні мати повний доступ до кожного зареєстрованого домену.

— НезадоволенняЗахист

Існує щонайменше 3 способи:

Посилання на ваш сайт.
Використання Інструментів Google для веб-майстрів (тепер називається Пошукова консоль)
Демпінги, тригери та інші параметри реєстратора.

Google швидко знайде багато нових сайтів у деяких реєстраторів. Наприклад, Google знайшов одне доменне ім’я, яке я зареєстрував за допомогою GoDaddy, проіндексував його та почав надсилати результати пошуку протягом 20 хвилин після реєстрації доменного імені. Але це відбудеться не для всіх реєстраторів.

Можуть бути й інші способи, але вони є найпоширенішими.

Якщо ви хочете, щоб Google швидко дізнався про ваш сайт, найкращий варіант - надіслати його за допомогою Інструментів для веб-майстрів Google (зараз він називається Search Console).

@zigojacko підкреслив чудовий момент (!) у коментарях, які дійсно повинні відповісти на відповідь. Якщо у вас є обліковий запис Google+, ви можете просто зв’язатися зі своїм веб-сайтом, і Google негайно це відзначить. Це хоча б так само швидко, як створити рахунок WMT, якщо не швидше!

[Підказка]

Мапи сайту та файли robots.txt не мають нічого спільного з виявленням домену. Насправді, мапи сайту непридатні для більшості сайтів, за винятком надзвичайно великих сайтів, сайтів, які неможливо повністю просканувати, оскільки не всі сторінки пов’язані, сайти з платною стіною або сайти з логіном. Мапи сайту не мають нічого спільного з ефективністю пошуку, окрім зазначених вище причин. Крім того, завжди бажано створити файл robots.txt, навіть якщо він порожній.

— closetnoc
джерело

@sheshadri У будь-який час !! Ми тут для вас і маємо тут справжніх експертів. Це один із сайтів, на який Google звертає увагу та інші авторитетні сайти.

— closetnoc

@sheshadri Багато великих реєстраторів майже в режимі реального часу діляться новою інформацією про реєстрацію в Google.

— closetnoc

Щоб кинути ще одну ідею в суміш на додаток до правильної відповіді @ closetnoc, це посилання на веб-сайт із Google+. Це, здається, викликає щось у Google, щоб відправити візит від Googlebot дуже швидко, іноді так само швидко, як і протягом години, хоча деякі тривають довше.

— zigojacko

Google також є самим реєстратором домену, тому я вважаю, що як реєстратор вони повинні мати доступ до всіх зареєстрованих доменів.

— Макс

@zigojacko Чудова точка !! Я часто забуваю про Google+, оскільки не займаюся соціальною справою.

— closetnoc

-1

Якщо ви використовуєте Панель інструментів Google і активуєте інформацію про сторінку, вона поінформує Google про URL-адресу сторінки (щоб отримати номер рейтингу сторінки), і це може призвести до індексації вашої сторінки.

— mawtex
джерело

Ні, не використовуйте це чи щось подібне.

— НезадоволенеЗакриття

Одне не має нічого спільного з іншим. База даних панелі інструментів і база даних пошуку повністю і повністю відокремлені один від одного. База даних панелі інструментів оновлюється за допомогою агрегатних агентів.

— closetnoc

Не кажучи вже про те, що Google TBPR вже давно скасовується, тому він, мабуть, більше нічого не робить.

— zigojacko