إضافة خريطة الموقع - لا عناوين ?page=… في خريطة الموقع الافتراضية

rrit · 7 مارس 2022، 1:35م

لا يتضمن المكون الإضافي sitemap أي عناوين URL ?page=… في الخرائط الأساسية الافتراضية، على سبيل المثال https://meta.discourse.org/sitemap_4.xml

<url>
  <loc>
    https://meta.discourse.org/t/importing-migrating-from-phpbb3/30810
  </loc>
  <lastmod>2022-02-25T21:55:40Z</lastmod>
</url>

في الخريطة الأخيرة، يتم تضمين عناوين URL لترقيم الصفحات - على سبيل المثال https://meta.discourse.org/sitemap_recent.xml

<url>
  <loc>
    https://meta.discourse.org/t/importing-migrating-from-phpbb3/30810?page=18
  </loc>
  <lastmod>2022-03-07T12:03:50Z</lastmod>
</url>

هل لا توجد عناوين URL ?page=… في الخرائط الافتراضية حسب التصميم؟
جميع عناوين URL ?page=… هذه هي عناوين URL قياسية وبالتالي يجب إضافتها إلى الخريطة الافتراضية - على سبيل المثال

<url>
  <loc>
    https://meta.discourse.org/t/importing-migrating-from-phpbb3/30810
  </loc>
  <lastmod>2022-02-25T21:55:40Z</lastmod>
</url>
<url>
  <loc>
    https://meta.discourse.org/t/importing-migrating-from-phpbb3/30810?page=2
  </loc>
  <lastmod>2022-03-02T19:08:07Z</lastmod>
</url>

[...]

<url>
  <loc>
    https://meta.discourse.org/t/importing-migrating-from-phpbb3/30810?page=18
  </loc>
  <lastmod>2022-03-07T12:03:50Z</lastmod>
</url>

المصادر

github.com/discourse/discourse-sitemap

plugin.rb

099d07469


      
          def default
            index = params.require(:page)
            sitemap = Sitemap.find_by(enabled: true, name: index.to_s)
            raise Discourse::NotFound if sitemap.blank?
          
            @output = Rails.cache.fetch("sitemap/#{index}/#{Sitemap.size}", expires_in: 24.hours) do
              @topics = Sitemap.topics_query_by_page(index.to_i).pluck(:id, :slug, :bumped_at, :updated_at).to_a
              render :default, content_type: 'text/xml; charset=UTF-8'
            end
            render plain: @output, content_type: 'text/xml; charset=UTF-8' unless performed?
            @output
          end

github.com/discourse/discourse-sitemap

plugin.rb

099d07469


      
          def recent
            sitemap = Sitemap.find_or_initialize_by(name: Sitemap::RECENT_SITEMAP_NAME)
            sitemap.update_last_posted_at!
          
            @output = Rails.cache.fetch("sitemap/recent/#{sitemap.last_posted_at.to_i}", expires_in: 1.hour) do
              @topics = Sitemap.topics_query(3.days.ago).limit(Sitemap.size).pluck(:id, :slug, :bumped_at, :updated_at, :posts_count).to_a
              render :default, content_type: 'text/xml; charset=UTF-8'
            end
            render plain: @output, content_type: 'text/xml; charset=UTF-8' unless performed?
            @output
          end

github.com/discourse/discourse-sitemap

app/views/discourse_sitemap/sitemap/default.erb

099d07469


      
          if topic[4]
            page = ((topic[4]+1) / TopicView.chunk_size) + 1
            if page > 1
              url += "?page=#{page}"
            end
          end

sam · 8 مارس 2022، 12:54ص

لا أعتقد أن هذا متعمد، هل يمكنك إنشاء طلب سحب لإصلاحه؟

mstm · 11 مارس 2022، 8:37م

شكرا @rrit، لاحظت هذا قبل بضعة أشهر أيضًا ولكني اعتقدت دائمًا أنه طبيعي

rrit · 13 مارس 2022، 7:29م

يمكنني تطبيق حل سهل ليس محددًا جدًا بشأن تاريخ آخر تعديل: على سبيل المثال، ستستخدم جميع صفحات موضوع واحد نفس تاريخ آخر مشاركة تم تحريرها.
وبالتالي، عند نشر مشاركة جديدة في موضوع (يحتوي على العديد من المشاركات والعديد من الصفحات)، ستحصل جميع الصفحات على تاريخ تغيير أخير جديد - حتى عندما تحتاج الصفحة الأخيرة فقط إلى التاريخ الجديد.

هل هذا حل ممكن؟

بخلاف ذلك، نحتاج إلى تجميع جميع مشاركات الموضوع في حزم من 20 مشاركة (لكل صفحة). ثم حساب تاريخ آخر تغيير لكل حزمة بنفسها.

sam · 13 مارس 2022، 11:54م

بصراحة، نظرت في هذا وأنا متردد بشأن أي تغييرات هنا، المشكلة ليست أن جوجل تواجه صعوبة في اكتشاف المحتوى على منتديات Discourse.

بل إنها تكتشف المحتوى وتزحف إليه، ثم بسبب “اتخاذ قرارات تعسفية” تقرر أن المحتوى لا ينتمي إلى الفهرس.

rrit · 1 أبريل 2022، 9:23ص

هل يعني “اتخاذ قرارات عشوائية” إحدى هذه النقاط:
(انظر Page indexing report - Search Console Help)

على الجانب الإيجابي لإضافة جميع عناوين URL الأساسية ?page=… إلى خريطة الموقع:
إنها تعطي Google تلميحًا قويًا بشأن \u003clastmod\u003e لعناوين URL هذه. وبالتالي، ليس لدى Google سبب لإعادة الزحف إلى عناوين URL ?page=… التي لم تتغير، وقد تستخدم ميزانية الزحف الثمينة الخاصة بها لعناوين URL الأكثر أهمية.

إذا كانت عناوين URL ?page=… مفقودة في خريطة الموقع، فإن Google تجدها على أي حال وتقوم ببعض عمليات إعادة الزحف “العشوائية” - حتى لو كانت غير ضرورية تمامًا حيث لا توجد تغييرات جديدة على المحتوى.

انظر Build and Submit a Sitemap | Google Search Central | Documentation | Google for Developers

تتتبع Google حقًا وتحدث فرقًا بين المكان الذي تعرف فيه عناوين URL من:
“جميع الصفحات المرسلة” (خريطة الموقع) أو “جميع الصفحات المعروفة” (الروابط وما إلى ذلك)
انظر وحدة تحكم بحث Google –\u003e الفهرس –\u003e تقرير التغطية

“تعد خريطة الموقع طريقة مهمة لـ Google لاكتشاف عناوين URL على موقعك.” انظر
“تختار Google الصفحة الأساسية بناءً على عدد من العوامل (أو الإشارات)، مثل [… ]، وجود عنوان URL في خريطة الموقع، […].” انظر
“لا يضمن استخدام خريطة الموقع أنه سيتم الزحف إلى جميع العناصر الموجودة في خريطة الموقع وفهرستها، حيث تعتمد عمليات Google على خوارزميات معقدة لجدولة الزحف.” انظر

mstm · 3 أبريل 2022، 10:26ص

آمل أن يتم تنفيذه جنبًا إلى جنب مع هذا

github.com/discourse/discourse-sitemap

DEV: Prepare plugin for deprecation.

main ← deprecation_prep

opened 03:44PM - 01 Apr 22 UTC

romanrizzi

+92 -70

We'll merge this plugin into core soon and need to make a couple of changes to a…void conflict. Changes are: - Wrap the sitemap model in a module so core can define its own. - Don't update sitemaps or add the path to the robots.txt file if the `publish_sitemap` setting is present, which is what's core is going to use. - Use append instead of prepend for mounting the engine, so the same routes defined by core can have a higher priority, and we never hit this plugin's controller. - Core will use the same table if present, so we add `if_not_exists: true` in the migration just in case conflicts can originate based on the call order.

sam · 4 أبريل 2022، 5:24ص

هذا بالتأكيد شيء يجب أن يأخذه @Roman في الاعتبار عند دمجه في النواة.

أفضل بكثير دمج خريطة الموقع أولاً قبل إضافة المزيد من التغييرات، ولكن بمجرد الانتهاء من ذلك… ربما يمكننا البدء بعناوين URL للصفحات القياسية على _recent. لدينا عنوان URL قياسي الآن يمكن استخدامه في posts.rss مع التخزين المؤقت الكافي يمكن استخدامه أيضًا في خرائط المواقع.

rahim123 · 18 أكتوبر 2023، 6:38ص

أواجه مشكلة مع Google Search Console في محاولة فهرسة عناوين URL مثل https://example.com/t/title-slug/1234?page=3، مما يجعل Discourse يرمي خطأ 404. إزالة المعلمة ?page=x تجعل عنوان URL صالحًا.

أفترض أن هذا نوع من الآثار الجانبية لـ Discourse الذي يضيف ترقيم الصفحات إلى الإصدار من الموقع الذي يقدمه للزواحف:

sam · 18 أكتوبر 2023، 7:06ص

تعمل عناوين URL للصفحات بشكل جيد، تحتاج فقط إلى المزيد من N مشاركات.

هل لديك الكثير من المشاركات المحذوفة حول هذا الموضوع؟

rahim123 · 18 أكتوبر 2023، 1:47م

مرحباً سام، شكراً على الرد. بعد نشر هذا، وجدت شرحك هنا:

ولكن في حالتي، لا، المواضيع التي بها هذه المشكلة والتي نظرت إليها لا تظهر أي تعديلات على التسلسل الأصلي. الشيء الوحيد هو أنها تم استيرادها من Drupal. ولكن أحتاج إلى التعمق أكثر في أمثلة أخرى لمعرفة ما إذا كانت أي مواضيع تم إنشاؤها في الأصل في Discourse تتأثر أيضاً، لأنه للأسف هناك أطنان منها، بالآلاف ربما.

sam · 18 أكتوبر 2023، 10:41م

يا إلهي، هل تم استيراد أطنان من Drupal؟ هل هذا هو الخيط المشترك هنا؟

rahim123 · 18 أكتوبر 2023، 10:44م

نعم، ما يقرب من 100 ألف موضوع وحوالي 2 مليون مشاركة. لست متأكدًا مما إذا كانت هذه المشكلة تتعلق فقط بالمواضيع المستوردة، سأعود إلى هنا قريبًا إذا وجدت أي شذوذات أخرى.

الموضوع		الردود	مرات العرض
?page= bug, both in core and in sitemap plugin Bug sitemap	4	609	1 يونيو 2021
Canonical tag on topic URL Bug	23	2424	7 فبراير 2017
Googlebot 404 errors due to page numbers Support	13	964	18 أكتوبر 2023
Sitemap issue Support sitemap	18	274	25 يوليو 2024
Pagination URL scheme not passed through when topic is renamed Feature	22	3948	20 مايو 2015

إضافة خريطة الموقع - لا عناوين ?page=… في خريطة الموقع الافتراضية

المصادر

الموضوعات ذات الصلة