За последние несколько мои доп. ссылки в поиске Google постепенно исчезли (см. график ниже). Кто-нибудь ещё сталкивается с этим? Мы не трогали сайт уже давно, кроме обновлений.
2 лайка
Вы забыли опубликовать график. 
2 лайка
У меня то же самое. Похоже, Google сообщает: «Результаты расширенного поиска не обнаружены» — находит только поле поиска на каждой странице.
Возможно, стоит посмотреть здесь:
3 лайка
Я заметил, что снижение количества валидных страниц началось примерно в середине ноября. За этот период вышло два релиза: 2.9.0.beta11 около 1 ноября и 2.9.0.beta12 около 14 ноября. Обычно я обновляюсь в течение трёх дней после выхода релиза.
Вот мой график:
Возможно, в одном из этих релизов структура HTML-страницы Discourse изменилась так, что это существенно повлияло на работу Google.
2 лайка
Ещё один похожий:
Меньший форум, чтобы эти капли были более заметны. И я склонен обновлять/улучшать систему хотя бы раз в неделю.
3 лайка
Я пользуюсь форумом на Discourse, который малоизвестен, обновляется нечасто и, вероятно, редко индексируется Google.
Если я ищу
«Один бит-флиппинг NIC обрушил облачное хранилище Amazon»
то получаю результат, включающий изображение с целевой страницы:
Подозреваю, что именно это мы сейчас теряем. Результаты для моих обновлённых и менее малоизвестных форумов — просто текстовые сниппеты.
Вот заголовок той целевой страницы, как его видит мой браузер — не уверен, видит ли Google то же самое.
<!DOCTYPE html>
<html lang="en" class="desktop-view not-mobile-device text-size-normal">
<head>
<meta charset="utf-8">
<title>One bit-flipping NIC took down Amazon's cloud storage (2008) - cloud - Postmortems</title>
<meta name="description" content="Official statement:
Amazon S3 Availability Event: July 20, 2008
Peter Vosshall in the video below says
… it took down s3 completely. So one server, one NIC, one bit, took down our regional service and that was the on&hellip;">
<meta name="discourse_theme_id" content="3">
<meta name="discourse_current_homepage" content="latest">
<meta name="generator" content="Discourse 2.9.0.beta14 - https://github.com/discourse/discourse version fb2507c6ce80a1f4fc3a68a23342e5eca765a13f">
<link rel="icon" type="image/png" href="https://postmortems.info/uploads/default/optimized/1X/_129430568242d1b7f853bb13ebea28b3f6af4e7_2_32x32.png">
<link rel="apple-touch-icon" type="image/png" href="https://postmortems.info/uploads/default/optimized/1X/_129430568242d1b7f853bb13ebea28b3f6af4e7_2_180x180.png">
<meta name="theme-color" media="all" content="#ffffff">
<meta name="viewport" content="width=device-width, initial-scale=1.0, minimum-scale=1.0, user-scalable=yes, viewport-fit=cover">
<link rel="canonical" href="https://postmortems.info/t/one-bit-flipping-nic-took-down-amazons-cloud-storage-2008/622" />
<link rel="search" type="application/opensearchdescription+xml" href="https://postmortems.info/opensearch.xml" title="Postmortems Search">
<meta name="csrf-param" content="authenticity_token" />
<meta name="csrf-token" content="HMY_f3K39gT7gyv1DSmPRW8zd7v29Z0kD55iyNR9C3zgwwBbbgXmhK9Euzuu0gpooN7LlzSSueWlIz4GawwPmw" />
<meta name="fragment" content="!">
<link rel="preload" href="/assets/start-discourse-f6e4e67026eabe0c9b84599087eb11ee33d8149f196b7439b0630ed5ab4d5f29.js" as="script">
<link rel="preload" href="/assets/browser-update-d7761004034ce1ea7686d586f5e8a8d216e6f67b609f9b4bcaba53b8b8d34729.js" as="script">
<link rel="preload" href="/assets/browser-detect-7af298cd000a967d2bdc01b04807eda2924a388584ea38ad84919b726283c2ed.js" as="script">
<script defer src="/assets/browser-detect-7af298cd000a967d2bdc01b04807eda2924a388584ea38ad84919b726283c2ed.js"></script>
<link rel="preload" href="/assets/locales/en-4632a4adf53ab69af31ccd61772e71da2b8d273a9238188b7322caa0beb9e231.js" as="script">
<script defer src="/assets/locales/en-4632a4adf53ab69af31ccd61772e71da2b8d273a9238188b7322caa0beb9e231.js"></script>
<link rel="preload" href="/assets/vendor-0086bb622ee0d0e4b902506c9c6b6e6da9dea80b09d9e2307a0e80ee8ae90cb5.js" as="script">
<script defer src="/assets/vendor-0086bb622ee0d0e4b902506c9c6b6e6da9dea80b09d9e2307a0e80ee8ae90cb5.js"></script>
<link rel="preload" href="/assets/chunk.857.91d4bdb47afe27a0b223-cc02271de56ef602d0fb03225b01336e39ea5e0e833131533d046d5f7fa0e9dd.js" as="script">
<script defer src="/assets/chunk.857.91d4bdb47afe27a0b223-cc02271de56ef602d0fb03225b01336e39ea5e0e833131533d046d5f7fa0e9dd.js"></script>
<link rel="preload" href="/assets/chunk.143.554dfbd1faa360aeb1d7-bbbe9995b2c8f62e4972b08bcea57ab4fbca241815fa3712c9c82bc3a692155e.js" as="script">
<script defer src="/assets/chunk.143.554dfbd1faa360aeb1d7-bbbe9995b2c8f62e4972b08bcea57ab4fbca241815fa3712c9c82bc3a692155e.js"></script>
<link rel="preload" href="/assets/discourse-5717caf5e6e015828843fb47d9b7fa86336c8c7a3f293f8ca41d572e4a458e96.js" as="script">
<script defer src="/assets/discourse-5717caf5e6e015828843fb47d9b7fa86336c8c7a3f293f8ca41d572e4a458e96.js"></script>
<link rel="preload" href="/assets/plugins/discourse-details-3262864f1b5a3f1b862422b3e2a0d3a296de258f13c70f25bd1f512e29ed1d97.js" as="script">
<script defer src="/assets/plugins/discourse-details-3262864f1b5a3f1b862422b3e2a0d3a296de258f13c70f25bd1f512e29ed1d97.js"></script>
<link rel="preload" href="/assets/plugins/discourse-local-dates-3d830b7216fd387586ab877d3474fd56fe7d1b58f7915636490c00baca46a3a9.js" as="script">
<script defer src="/assets/plugins/discourse-local-dates-3d830b7216fd387586ab877d3474fd56fe7d1b58f7915636490c00baca46a3a9.js"></script>
<link rel="preload" href="/assets/plugins/discourse-narrative-bot-cb6fa1c8b042328ccee9b135ef703e4c383d0595f1ee4d2f0cc2392a48ce485b.js" as="script">
<script defer src="/assets/plugins/discourse-narrative-bot-cb6fa1c8b042328ccee9b135ef703e4c383d0595f1ee4d2f0cc2392a48ce485b.js"></script>
<link rel="preload" href="/assets/plugins/discourse-presence-11bf773d7d34416ce01190e5c36e8d9e7c6ac78c5dc848f38402f82f05fc37b3.js" as="script">
<script defer src="/assets/plugins/discourse-presence-11bf773d7d34416ce01190e5c36e8d9e7c6ac78c5dc848f38402f82f05fc37b3.js"></script>
<link rel="preload" href="/assets/plugins/docker_manager-3d9182e7201f69426040bf2be635fa04454aa12b984610fab305ce6ae44689a3.js" as="script">
<script defer src="/assets/plugins/docker_manager-3d9182e7201f69426040bf2be635fa04454aa12b984610fab305ce6ae44689a3.js"></script>
<link rel="preload" href="/assets/plugins/lazy-yt-37ba46caad39a8d451e22030fac3ba0c04d3c2aa5cf73544b9c23ec143dcbf99.js" as="script">
<script defer src="/assets/plugins/lazy-yt-37ba46caad39a8d451e22030fac3ba0c04d3c2aa5cf73544b9c23ec143dcbf99.js"></script>
<link rel="preload" href="/assets/plugins/poll-3772958eb9b6ce2f5bbb0a90e9a2925586933212cc816daa749f2a6ff7c8d5cc.js" as="script">
<script defer src="/assets/plugins/poll-3772958eb9b6ce2f5bbb0a90e9a2925586933212cc816daa749f2a6ff7c8d5cc.js"></script>
<link rel="preload" href="/extra-locales/admin?v=5273f5b8ab23c0f09f8900c146f7dfbb" as="script">
<script defer src="/extra-locales/admin?v=5273f5b8ab23c0f09f8900c146f7dfbb"></script>
<link rel="preload" href="/assets/admin-3e297caed7810816d80e1d9564d31c87fd0e6d43133d12828144f485df3aa5a9.js" as="script">
<script defer src="/assets/admin-3e297caed7810816d80e1d9564d31c87fd0e6d43133d12828144f485df3aa5a9.js"></script>
<link id="manifest-link" rel="manifest" href=/manifest.webmanifest crossorigin="use-credentials">
<link rel="alternate nofollow" type="application/rss+xml" title="RSS feed of 'One bit-flipping NIC took down Amazon's cloud storage (2008)'" href="https://postmortems.info/t/one-bit-flipping-nic-took-down-amazons-cloud-storage-2008/622.rss" />
<meta property="og:site_name" content="Postmortems" />
<meta property="og:type" content="website" />
<meta name="twitter:card" content="summary" />
<meta name="twitter:image" content="https://postmortems.info/images/discourse-logo-sketch-small.png" />
<meta property="og:image" content="https://postmortems.info/images/discourse-logo-sketch-small.png" />
<meta property="og:url" content="https://postmortems.info/t/one-bit-flipping-nic-took-down-amazons-cloud-storage-2008/622" />
<meta name="twitter:url" content="https://postmortems.info/t/one-bit-flipping-nic-took-down-amazons-cloud-storage-2008/622" />
<meta property="og:title" content="One bit-flipping NIC took down Amazon's cloud storage (2008)" />
<meta name="twitter:title" content="One bit-flipping NIC took down Amazon's cloud storage (2008)" />
<meta property="og:description" content="Official statement: Amazon S3 Availability Event: July 20, 2008 Peter Vosshall in the video below says … it took down s3 completely. So one server, one NIC, one bit, took down our regional service and that was the only layer - we had checksumming all the way up and down the stack - that was the only layer that didn’t have the checksumming. As seen on HN: Reminds me of a rogue NIC, flipping a single bit every now and then, that took down S3: Ref: https://news.ycombinator...." />
<meta name="twitter:description" content="Official statement: Amazon S3 Availability Event: July 20, 2008 Peter Vosshall in the video below says … it took down s3 completely. So one server, one NIC, one bit, took down our regional service and that was the only layer - we had checksumming all the way up and down the stack - that was the only layer that didn’t have the checksumming. As seen on HN: Reminds me of a rogue NIC, flipping a single bit every now and then, that took down S3: Ref: https://news.ycombinator...." />
<meta property="article:published_time" content="2020-05-11T13:14:59+00:00" />
<meta property="og:ignore_canonical" content="true" />
<meta id="data-discourse-setup" data-base-url="https://postmortems.info" data-base-uri="" data-environment="production" data-letter-avatar-version="5_684b749d1c1eee86b31a584fa946fc1a" data-markdown-it-url="/assets/markdown-it-bundle-2cd81b202957f9fd91c706abaa4902ae44bb77e7b0ef6abcf5c18587dfa9c5b6.js" data-service-worker-url="service-worker.js" data-default-locale="en" data-asset-version="191356ca2533fd1871d60d97ca8dca2f" data-disable-custom-css="false" data-highlight-js-path="/highlight-js/postmortems.info/a5a82d5d9c93ba17b974dbe7408b61e64d7130b7.js" data-svg-sprite-path="/svg-sprite/postmortems.info/svg-3-69607f2c7bea253fd5873db55f6da14d4413a71b.js" data-enable-js-error-reporting="true" data-color-scheme-is-dark="false" data-user-color-scheme-id="2" data-user-dark-scheme-id="-1">
<meta name="discourse/config/environment" content="%7B%22modulePrefix%22%3A%22discourse%22%2C%22environment%22%3A%22production%22%2C%22rootURL%22%3A%22%22%2C%22locationType%22%3A%22history%22%2C%22historySupportMiddleware%22%3Afalse%2C%22EmberENV%22%3A%7B%22FEATURES%22%3A%7B%7D%2C%22EXTEND_PROTOTYPES%22%3A%7B%22Date%22%3Afalse%7D%2C%22_APPLICATION_TEMPLATE_WRAPPER%22%3Afalse%2C%22_DEFAULT_ASYNC_OBSERVERS%22%3Atrue%2C%22_JQUERY_INTEGRATION%22%3Atrue%7D%2C%22APP%22%3A%7B%22name%22%3A%22discourse%22%2C%22version%22%3A%222.9.0.beta14%20fb2507c6ce80a1f4fc3a68a23342e5eca765a13f%22%2C%22exportApplicationGlobal%22%3Atrue%7D%7D" />
</head>
<body class="">
5 лайков
По сути…
В моём случае это значительно снизилось ещё много месяцев назад.
На изображении показан только последний период.
Количество проиндексированных страниц также сильно упало…
1 лайк
У меня похожая проблема, но в моём случае это, скорее всего, особенность конкретного сайта (если только другие тоже не сталкиваются с этим?)
Для меня ссылки на разделы сайта (sitelinks) также исчезли в начале ноября. Похоже, осталась только главная страница.
1 лайк
Нет, нет, это не только в вашем случае…
У меня наблюдается снижение количества проиндексированных страниц на двух разных сайтах на базе Discourse, и только с этим программным обеспечением.
Это продолжается уже несколько месяцев и становится всё хуже и хуже, теперь я пытаюсь мигрировать на что-то другое.
1 лайк
Не фокусируйтесь только на сайт-ссылках, у проиндексированных страниц та же проблема.
2 лайка
Да, похоже на то, хотя спад происходит медленнее и менее драматично…
2 лайка
Относится ли Googlebot к классу неподдерживаемых браузеров?
2 лайка
Что видит браузер, который не поддерживается? Страницу с одной ссылкой на список поддерживаемых браузеров? 
И всё же, как это объясняет постепенное снижение, а не резкий обрыв?
2 лайка
Я не знаю. Расскажите мне
Я знаю то же, что и все: структура сайта — это основа, на которой Google принимает решения о том, что и как показывать. Но структура — это лишь база, а всё остальное зависит от алгоритмов Google.
Поскольку это происходит практически со всеми сайтами на Discourse, есть только два варианта:
- что-то изменилось в самом Discourse
- Google изменил алгоритм
В результате форумы больше не считаются «достойными» для отображения ссылок на разделы (sitelinks). Однако большинству форумов такие результаты поиска с ссылками на разделы на самом деле не нужны. Они не приносят реальной пользы пользователям.
Можно было бы показывать категории. Но даже здесь их слишком много, и они бы заполняли/раздували страницы результатов. Если вы ещё не заметили, Google старается сохранять длину страницы результатов поиска примерно одинаковой всё время.
Я действительно не знаю. Никто здесь не знает. Но я точно знаю одно: даже мои сайты на WordPress ведут себя совершенно аналогично.
SEO всё ещё работает (редактирование: я имел в виду ранжирование). Но мой Discourse даже близко не подходит к тому, чего я мог бы достичь с помощью WordPress, и это меня уже давно беспокоит.
2 лайка
Я бы гораздо меньше беспокоился об индексированных страницах — на форумах вроде Discourse много избыточных ссылок, ведущих на одну и ту же страницу. Возможно, происходит дедупликация, что хорошо, потому что иначе форум выглядит как гигантская SEO-ферма.
2 лайка
Заголовок этой темы гласит «Исчезновение ссылок на сайт», но на графике, который вы привели, написано «Поисковая строка для ссылок на сайт».
Я проверил несколько наших размещённых сайтов, и ссылки на сайт по-прежнему присутствуют на всех из них. Исчезла только поисковая строка.
Таким образом, где-то что-то изменилось, и в результатах поиска Discourse, когда отображаются ссылки на сайт, отсутствует поле ввода для поиска. Правильно ли я описал проблему?
3 лайка
Эти графики показывают результаты индексации страниц. Не могли бы вы поделиться причинами, которые Google указывает для страниц, не прошедших индексацию?
Например, если посмотреть здесь на meta, то 66% наших неиндексированных страниц имеют причину «Альтернативная страница с правильным каноническим тегом». Что видят другие?
1 лайк