การสร้างดัชนี SEO 101: วิธีสร้างกลยุทธ์การจัดทำดัชนีสำหรับเว็บไซต์ของคุณ
เผยแพร่แล้ว: 2021-12-14เครื่องมือค้นหาไม่ควรจัดทำดัชนีทุกหน้าในเว็บไซต์ของคุณ
แม้ว่าคุณจะคิดว่าทุกอย่างในไซต์ของคุณยอดเยี่ยมมาก แต่เว็บไซต์ส่วนใหญ่ก็มีหน้ามากมายที่ไม่อยู่ในผลการค้นหา และหากคุณปล่อยให้เครื่องมือค้นหาจัดทำดัชนีหน้าเหล่านั้น คุณอาจเผชิญกับผลกระทบด้านลบ
นั่นเป็นเหตุผลที่คุณต้องการ กลยุทธ์การจัดทำดัชนี สำหรับไซต์ของคุณ องค์ประกอบหลักของมันคือ:
- ตัดสินใจว่าหน้าใดที่คุณต้องการให้เครื่องมือค้นหาจัดทำดัชนี และใช้วิธีการที่เหมาะสมเพื่อเพิ่มโอกาสในการจัดทำดัชนี
- ตัดสินใจว่าไม่ควรจัดทำดัชนีหน้าใดและจะแยกหน้าดังกล่าวออกจากการค้นหาได้อย่างไรโดยไม่จำกัดการมองเห็นการค้นหาที่อาจเกิดขึ้นของคุณ
การตัดสินใจว่าหน้าใดควรหรือไม่ควรจัดทำดัชนีเป็นเรื่องยาก คุณอาจพบหลักเกณฑ์และเคล็ดลับบางประการสำหรับหน้าเว็บบางหน้า แต่คุณมักจะดำเนินการด้วยตัวเอง
และการเลือกวิธีการที่เหมาะสมในการแยกหน้าเหล่านั้นออกจากผลการค้นหานั้นยังต้องพิจารณาอีกมาก คุณควรใช้แท็ก noindex หรือแท็กบัญญัติ บล็อกหน้าใน robots.txt หรือใช้การเปลี่ยนเส้นทางถาวร
บทความนี้จะสรุป กระบวนการตัดสินใจ ที่จะช่วยให้คุณ สร้างกลยุทธ์การจัดทำดัชนีที่กำหนดเองสำหรับเว็บไซต์ของคุณได้
แม้ว่าคุณอาจประสบปัญหาที่ไม่เป็นไปตามตรรกะที่ฉันเสนอ แต่กระบวนการที่ขีดเส้นใต้ด้านล่างจะให้ผลลัพธ์ที่ยอดเยี่ยมในกรณีส่วนใหญ่ที่ท่วมท้น
เหตุใดจึงไม่ควรจัดทำดัชนีบางหน้า
มีเหตุผลหลักสองประการที่ทำให้คุณไม่ต้องการให้เครื่องมือค้นหาจัดทำดัชนีหน้าเว็บทั้งหมดของคุณ:
- ช่วยเพิ่มประสิทธิภาพงบประมาณการรวบรวมข้อมูล
- เนื้อหาคุณภาพต่ำจำนวนมากที่จัดทำดัชนีได้อาจทำให้เครื่องมือค้นหาดูเว็บไซต์ของคุณเสียหาย
เพิ่มประสิทธิภาพงบประมาณการรวบรวมข้อมูลของคุณ
บอทของเสิร์ชเอ็นจิ้นสามารถรวบรวมข้อมูลหน้าเว็บได้จำนวนจำกัดในเว็บไซต์ที่กำหนด อินเทอร์เน็ตมีขนาดใหญ่ไม่สิ้นสุด และการรวบรวมข้อมูลทุกอย่างจะเกินทรัพยากรที่เสิร์ชเอ็นจิ้นมี
ระยะเวลาและทรัพยากรที่บอทของเครื่องมือค้นหาใช้ในการรวบรวมข้อมูลเว็บไซต์ของคุณเรียกว่า Crawl Budget หากคุณเปลืองงบประมาณในการรวบรวมข้อมูลในหน้าคุณภาพต่ำ อาจมีไม่เพียงพอสำหรับหน้าที่มีค่าที่สุดที่ควรได้รับการจัดทำดัชนีจริงๆ
การใช้เวลาในการตัดสินใจว่าคุณต้องการสร้างดัชนีหน้าใด คุณสามารถปรับงบประมาณการรวบรวมข้อมูลของคุณให้เหมาะสม และตรวจสอบให้แน่ใจว่าบอทของเครื่องมือค้นหาจะไม่เปลืองทรัพยากรในหน้าที่สำคัญน้อยกว่า
หากคุณต้องการเรียนรู้เพิ่มเติมเกี่ยวกับการเพิ่มประสิทธิภาพงบประมาณการตระเวนของคุณ ลองดู Ultimate Guide to Crawl Budget Optimization ของเรา
อย่าปล่อยให้เนื้อหาคุณภาพต่ำทำลายเว็บไซต์ของคุณ
หากเครื่องมือค้นหาทราบว่าคุณมีเนื้อหาคุณภาพต่ำจำนวนมาก พวกเขาอาจตัดสินใจหยุดรวบรวมข้อมูลเว็บไซต์ของคุณบ่อยๆ
Tomek Rudzki ใน Ultimate Guide to Indexing SEO ของเขา เรียกสิ่งนี้ว่า “ ความรับผิดชอบ ร่วมกัน”
มันเป็นวงจรอุบาทว์:
- Google รวบรวมข้อมูลหน้าคุณภาพต่ำ
- Google หยุดเยี่ยมชมเว็บไซต์บ่อยครั้ง
- Google ไม่เคยมีการรวบรวมข้อมูลหน้าเว็บจำนวนมาก แม้ว่าจะเป็นหน้าคุณภาพสูงก็ตาม
- มีหน้าที่มีค่าที่ไม่ได้จัดทำดัชนี
นี่แสดงให้เห็นว่าการจัดอันดับ การรวบรวมข้อมูล และการจัดทำดัชนีนั้นเชื่อมโยงถึงกันอย่างไร
ที่มา: Tomasz Rudzki
วิธีการควบคุมการสร้างดัชนี
มีหลายวิธีที่คุณสามารถใช้เพื่อควบคุมการจัดทำดัชนีของหน้าเว็บของคุณ รวมถึง:
- เมตาแท็กโรบ็อต Noindex
- ไม่อนุญาตคำสั่งใน robots.txt
- แท็ก Canonical,
- เปลี่ยนเส้นทางถาวร
- แผนผังเว็บไซต์ XML
แต่ละวิธีข้างต้นมีการใช้งานและหน้าที่ของตัวเอง
เมตาแท็กโรบ็อต Noindex
<meta name="robots" content="noindex">หากคุณเพิ่มคำสั่งด้านบนในส่วน HTML <head> ของหน้าเว็บ บอทของเครื่องมือค้นหาจะเข้าใจว่าไม่ควรจัดทำดัชนี จะป้องกันไม่ให้หน้าปรากฏในหน้าผลลัพธ์ของเครื่องมือค้นหา
คุณควรใช้แท็กนี้หากคุณไม่ต้องการให้มีการจัดทำดัชนีหน้า แต่คุณยังต้องการให้บอทของเครื่องมือค้นหารวบรวมข้อมูลหน้าเว็บของคุณ และเช่น ตามลิงก์ในหน้านั้น
ไม่อนุญาตคำสั่งใน robots.txt
ตัวแทนผู้ใช้: * ไม่อนุญาต: /example/page.html
คำสั่ง disallow ในไฟล์ robots.txt ช่วยให้คุณสามารถบล็อกการเข้าถึงหน้าเว็บของเครื่องมือค้นหา หากบ็อตของเครื่องมือค้นหาปฏิบัติตามคำสั่ง บอทจะไม่รวบรวมข้อมูลจากหน้าที่ไม่ได้รับอนุญาต ดังนั้นจึงไม่ได้รับการจัดทำดัชนี
เนื่องจากคำสั่ง disallow จำกัดการตระเวน วิธีนี้สามารถช่วยคุณ ประหยัดงบประมาณการตระเวนของคุณ
หมายเหตุ: คำสั่ง disallow ไม่ใช่วิธีที่เหมาะสมในการบล็อกการเข้าถึงหน้าที่ละเอียดอ่อนของคุณ บ็อตที่เป็นอันตรายจะไม่สนใจไฟล์ robots.txt และยังคงเข้าถึงเนื้อหาได้ หากคุณต้องการให้แน่ใจว่าบางหน้าไม่สามารถเข้าถึงบ็อตทั้งหมดได้ ทางที่ดีควรบล็อกด้วยรหัสผ่าน
แท็ก Canonical
<link rel="canonical" href="https://www.example.com/page.html">แท็กตามรูปแบบบัญญัติเป็นองค์ประกอบ HTML ที่บอกเครื่องมือค้นหาว่า URL ที่ซ้ำกันเป็น URL ดั้งเดิม
เมื่อใช้แท็กตามรูปแบบบัญญัติ คุณจะระบุเวอร์ชันของหน้าเว็บที่คุณต้องการสร้างดัชนีได้อย่างแม่นยำและปรากฏในผลการค้นหา หากไม่มี Canonical tag คุณจะไม่สามารถควบคุมเวอร์ชันของหน้าที่ได้รับการจัดทำดัชนีได้
บอทของเครื่องมือค้นหายังคงต้องรวบรวมข้อมูลหน้าเพื่อค้นหาแท็ก Canonical ดังนั้นการใช้แท็กดังกล่าวจะไม่ช่วยให้คุณประหยัดงบประมาณการรวบรวมข้อมูลของคุณ
เปลี่ยนเส้นทางถาวร
การเปลี่ยนเส้นทาง 301 เป็นรหัสตอบกลับ HTTP ที่ระบุการเปลี่ยนเส้นทางถาวร ระบุว่าหน้าที่ร้องขอมีตำแหน่งใหม่และหน้าเก่าถูกลบออกจากเซิร์ฟเวอร์
เมื่อคุณใช้การเปลี่ยนเส้นทาง 301 ผู้ใช้และบอทของเครื่องมือค้นหาจะไม่เข้าถึง URL เก่า แต่จะมีการเปลี่ยนเส้นทางสัญญาณการเข้าชมและการจัดอันดับไปยังหน้าใหม่
การใช้การเปลี่ยนเส้นทาง 301 เป็นวิธีที่ดีในการประหยัดงบประมาณการรวบรวมข้อมูล คุณกำลังลดจำนวนหน้าที่มีอยู่ในเว็บไซต์ของคุณ ดังนั้นบอทของเครื่องมือค้นหาจึงมีเนื้อหาให้รวบรวมข้อมูลน้อยลง
จำไว้ว่าคุณควรเปลี่ยนเส้นทางไปยังหน้าที่เกี่ยวข้องเท่านั้น การเปลี่ยนเส้นทางไปยังหน้าที่ไม่เกี่ยวข้องอาจทำให้ผู้ใช้สับสน นอกจากนี้ บอทของเครื่องมือค้นหาอาจไม่ติดตามการเปลี่ยนเส้นทางและถือว่าหน้านั้นเป็น soft 404
XML Sitemaps
แผนผังเว็บไซต์ XML คือไฟล์ข้อความที่แสดงรายการ URL ที่คุณต้องการให้เครื่องมือค้นหาจัดทำดัชนี จุดประสงค์คือเพื่อช่วยให้บอทของเครื่องมือค้นหาสามารถค้นหาหน้าที่คุณสนใจได้อย่างง่ายดาย
แผนผังเว็บไซต์ที่ได้รับการปรับแต่งมาอย่างดีไม่เพียงแต่ นำเครื่องมือค้นหาไปยังหน้าที่มีค่าของคุณ เท่านั้น แต่ยัง ช่วยให้คุณประหยัดงบประมาณในการรวบรวมข้อมูลได้อีกด้วย หากไม่มีบอท บอทจะต้องรวบรวมข้อมูลทั้งไซต์เพื่อค้นหาเนื้อหาอันมีค่าของคุณ
นั่นเป็นเหตุผลที่ แผนผังเว็บไซต์ควรแสดงเฉพาะ URL ที่จัดทำดัชนีได้บนเว็บไซต์ของคุณ ซึ่งหมายความว่าหน้าที่คุณใส่ในแผนผังเว็บไซต์ควรเป็น:
- บัญญัติ
- ไม่ถูกบล็อกโดยเมตาแท็ก noindex robots และ
- ไม่ถูกบล็อกโดยคำสั่ง disallow ใน robots.txt
- ตอบกลับด้วยรหัสสถานะ 200
คุณสามารถเรียนรู้เพิ่มเติมเกี่ยวกับการเพิ่มประสิทธิภาพแผนผังเว็บไซต์ได้ใน Ultimate Guide to XML Sitemaps
วิธีตัดสินใจว่าควรหรือไม่ควรจัดทำดัชนีหน้าใด
เพื่อช่วยคุณตัดสินใจว่าควรหรือไม่ควรจัดทำดัชนีหน้าใด ฉันได้สร้างโครงสร้างการตัดสินใจที่มีคำถามสำคัญทั้งหมดที่คุณต้องตอบ
ดูภาพในขนาดเต็ม
ดังที่คุณเห็นด้านบน คำถามพื้นฐานคือ หน้านี้มีค่า สำหรับทุกคนหรือไม่
มีสามคำตอบที่เป็นไปได้สำหรับคำถามนั้น:
- หน้านี้มีค่าสำหรับผู้ใช้เสิร์ชเอ็นจิ้น (และเสิร์ชเอ็นจิ้น)
- หน้านี้มีค่าสำหรับเครื่องมือค้นหา
- เพจไม่มีค่าสำหรับใคร
สิ่งสำคัญที่สุดคือ ควรจัดทำดัชนี เฉพาะหน้าที่ มีคุณค่าต่อผู้ใช้ อย่างไรก็ตาม แม้แต่ในหมวดหมู่นั้น ก็ยังมีหน้าเว็บบางประเภทที่ไม่ควรจัดทำดัชนี
มาทำลายมันกันเถอะ
หน้าที่มีคุณค่าต่อผู้ใช้
เพจ มี ค่าสำหรับผู้ใช้เสิร์ชเอ็นจิ้นหากมีคำตอบสำหรับการค้นหาหรืออนุญาตให้นำทางไปยังคำตอบ
ในกรณีส่วนใหญ่ หากเพจมีค่าต่อผู้ใช้ เพจนั้นควรได้รับการจัดทำดัชนี อย่างไรก็ตาม อาจมีสถานการณ์ที่หน้าเว็บมีค่าต่อผู้ใช้แต่ไม่ควรจัดทำดัชนี
หน้าที่มีคุณค่าต่อผู้ใช้ที่ควรจัดทำดัชนี
เพจควรได้รับการจัดทำดัชนีหาก:
- นำเสนอเนื้อหาคุณภาพสูงและไม่ซ้ำใครที่นำทราฟฟิก
- เป็นเวอร์ชันภาษาอื่นของหน้าคุณภาพสูงอื่น (ถ้ามี)
เนื้อหาคุณภาพสูงและไม่ซ้ำใคร
หน้าคุณภาพสูงและไม่ซ้ำใครที่นำการเข้าชมมายังไซต์ของคุณควรนำมาสู่แผนผังไซต์ของคุณอย่างแน่นอน ตรวจสอบให้แน่ใจว่าคุณไม่ได้บล็อกพวกเขาใน robots.txt และพวกเขาไม่มีแท็ก noindex meta robots
ให้ความสนใจเป็นพิเศษกับ เพจที่มีค่าที่สุดสำหรับธุรกิจของ คุณ พวกเขามักจะทำให้เกิดการกลับใจใหม่มากที่สุด หน้าชอบ:
- หน้าแรก
- เกี่ยวกับเราและหน้าติดต่อ
- หน้าที่มีข้อมูลเกี่ยวกับบริการที่คุณให้
- บทความบล็อกที่แสดงความเชี่ยวชาญของคุณ
- หน้าที่มีรายการเฉพาะ (เช่น ผลิตภัณฑ์อีคอมเมิร์ซ)
ควรจัดทำดัชนีได้เสมอ และคุณควรตรวจสอบการจัดทำดัชนีอย่างสม่ำเสมอ
เวอร์ชันภาษาอื่น
เนื้อหาที่แปลจะไม่ถือว่าซ้ำกันโดยเครื่องมือค้นหา อันที่จริง เสิร์ชเอ็นจิ้นต้องการทราบว่าคุณมีเวอร์ชันหลายภาษาหรือไม่ เพื่อนำเสนอเวอร์ชันที่เหมาะสมที่สุดแก่ผู้ใช้ในประเทศต่างๆ
หากคุณมีหน้าเว็บเวอร์ชันภาษาอื่น คุณควรระบุเวอร์ชันดังกล่าวด้วย แท็ก hreflang และใส่หน้าเว็บลงในแผนผังไซต์ของคุณ
คุณสามารถระบุแท็ก hreflang ในแผนผังไซต์ HTML หรือทั้งสองอย่าง แท็ก Hreflang ที่ใช้ในแผนผังเว็บไซต์นั้นใช้ได้อย่างสมบูรณ์จากมุมมองของเครื่องมือค้นหา อย่างไรก็ตาม การตรวจสอบด้วยเครื่องมือ SEO หรือปลั๊กอินของเบราว์เซอร์อาจทำได้ยาก ด้วยเหตุนี้ วิธีที่แนะนำในการเพิ่มแท็กจึงอยู่ในโค้ด HTML และแผนผังเว็บไซต์ หรือเฉพาะในโค้ด HTML
โปรดจำไว้ว่าแต่ละหน้าจำเป็นต้องระบุเวอร์ชันภาษาทั้งหมด รวมถึงภาษาของหน้านั้นเอง
หน้าที่มีคุณค่าต่อผู้ใช้ที่ไม่ควรจัดทำดัชนี
ในบางสถานการณ์ หน้าเว็บอาจมีประโยชน์ต่อผู้ใช้ แต่ก็ยังไม่ควรจัดทำดัชนี สถานการณ์รวมถึง:
- เนื้อหาที่ซ้ำกันหรือใกล้เคียงกัน
- หน้าที่ไม่ต้องการการค้นหา
ซ้ำหรือใกล้เคียงกันของหน้าอื่น
บอทของเครื่องมือค้นหาอาจถือว่าหน้าซ้ำหรือใกล้เคียงกันหาก:
- URL ที่ต่างกันตั้งแต่สองรายการขึ้นไปนำไปสู่หน้าเดียวกัน
- สองหน้าที่แตกต่างกันมีเนื้อหาที่คล้ายกันมาก
ตัวอย่างที่พบบ่อยที่สุดของเนื้อหาที่ซ้ำกันคือหน้าหมวดหมู่ที่กรองบนไซต์อีคอมเมิร์ซ ผู้ใช้สามารถใช้ตัวกรองเพื่อจำกัดผลิตภัณฑ์ให้แคบลงและค้นหาสิ่งที่ต้องการได้เร็วขึ้น ขออภัย ตัวกรองที่ใช้แต่ละรายการอาจบันทึกพารามิเตอร์ใน URL ทำให้เกิด URL หลายรายการซึ่งนำไปสู่หน้าเดียวกัน
ตัวอย่างเช่น store.com/dresses/item และ store.com/dresses/item?color=yellow อาจชี้ไปที่เนื้อหาเดียวกัน
เหตุผลอื่นๆ สำหรับเนื้อหาที่ซ้ำหรือใกล้เคียงกัน ได้แก่:
- มี URL ที่แตกต่างกันสำหรับรุ่นมือถือและเดสก์ท็อป
- มีเว็บไซต์ของคุณในรูปแบบสิ่งพิมพ์หรือ
- การสร้างเนื้อหาที่ซ้ำกันโดยไม่ได้ตั้งใจ
ความเสี่ยงของการมีเนื้อหาที่ซ้ำกันที่จัดทำดัชนีได้ ได้แก่:
- ไม่สามารถควบคุมเวอร์ชันที่อาจปรากฏในผลการค้นหาได้ ตัวอย่างเช่น หากคุณมีฉบับพิมพ์และฉบับปกติ เครื่องมือค้นหาอาจแสดงฉบับพิมพ์ในการค้นหา
- การแบ่งสัญญาณการจัดอันดับระหว่าง URL หลายรายการ
- เพิ่มจำนวน URL ที่เครื่องมือค้นหาต้องรวบรวมข้อมูลอย่างมาก
- ลดตำแหน่งของคุณใน SERP หากเสิร์ชเอ็นจิ้นตัดสินใจว่าคุณต้องการจัดการการจัดอันดับ
เพื่อหลีกเลี่ยงผลกระทบด้านลบของการมีเนื้อหาที่ซ้ำกัน คุณควรตั้งเป้าที่จะ รวม มันเข้าด้วยกัน วิธีหลักในการรวมแท็กตามรูปแบบบัญญัติและการเปลี่ยนเส้นทาง 301
แท็ก Canonical เป็นตัวเลือกที่ดีที่สุดหากคุณต้องการให้ทุกหน้าพร้อมใช้งานสำหรับผู้ใช้
ตัวอย่างของเนื้อหาที่ซ้ำกันซึ่งควรมีอยู่ในเว็บไซต์ของคุณคือตัวอย่างที่ปรับปรุงประสบการณ์ผู้ใช้ ตัวอย่างเช่น เมื่อผู้ใช้กรองผลิตภัณฑ์บนไซต์อีคอมเมิร์ซ การเปลี่ยนเส้นทางอาจสร้างความสับสนด้วยเหตุผลหลายประการ เช่น การเปลี่ยนเส้นทางอย่างกะทันหัน
นอกจากนี้ อาจจำเป็นต้องมีเนื้อหาที่ซ้ำกันในไซต์ของคุณ เมื่อคุณมีเวอร์ชันต่างๆ สำหรับอุปกรณ์ที่แตกต่างกัน
ด้วยการ เปลี่ยนเส้นทาง 301 มีเพียงหน้าเดียวเท่านั้นที่พร้อมใช้งานบนไซต์ของคุณ ส่วนที่เหลือจะถูกเปลี่ยนเส้นทางโดยอัตโนมัติ
ตัวอย่างเช่น การเปลี่ยนเส้นทาง 301 อาจมีประโยชน์เมื่อคุณมีบล็อกโพสต์ที่คล้ายกันมากสองโพสต์ และตัดสินใจว่าควรเหลือบล็อกเดียวในไซต์ของคุณ รหัสสถานะ 301 จะเปลี่ยนเส้นทางการจราจรและสัญญาณการจัดอันดับไปยังบทความที่คุณเลือก เป็นวิธีที่ยอดเยี่ยมในการเพิ่มประสิทธิภาพงบประมาณการรวบรวมข้อมูลของคุณ แต่คุณสามารถใช้ได้เฉพาะเมื่อต้องการลบหน้าที่ซ้ำกัน
อย่าลืมทำการเปลี่ยนแปลงในแผนผังเว็บไซต์ทุกครั้งที่ใช้การเปลี่ยนเส้นทางถาวร คุณควรใส่เฉพาะหน้าที่ตอบกลับด้วยรหัสสถานะ 200 รหัสในแผนผังไซต์ของคุณ ดังนั้น หากคุณใช้การเปลี่ยนเส้นทาง 301 เพื่อรวมเนื้อหา เฉพาะเวอร์ชันที่อยู่บนเว็บไซต์ของคุณควรยังคงอยู่ในแผนผังเว็บไซต์
หน้าที่ไม่ต้องการการค้นหา
คุณอาจมีเนื้อหาที่ดีในไซต์ของคุณซึ่งไม่ต้องการการค้นหาใดๆ กล่าวอีกนัยหนึ่งไม่มีใครกำลังมองหามัน สิ่งนี้อาจเกิดขึ้นเมื่อคุณเขียนเกี่ยวกับงานอดิเรกเฉพาะกลุ่มหรือมีหน้าเว็บที่มีข้อความ "ขอบคุณ" สำหรับผู้ใช้ของคุณ
หน้าเหล่านี้อาจไม่นำมาซึ่งการเข้าชมหรือการแปลง บางทีคุณอาจต้องการทิ้งพวกเขาไว้เพราะพวกเขาช่วยเสริมการเดินทางของผู้ใช้ แต่คุณไม่ต้องการให้พวกเขาเป็นสิ่งแรกที่ผู้ใช้เห็นในผลการค้นหา
หากคุณไม่คิดว่าผู้ใช้ควรเห็นหน้าใดหน้าหนึ่งในผลการค้นหา หรือหน้านั้นไม่มีการเข้าชม ไม่จำเป็นต้องจัดทำดัชนี ด้วยวิธีนี้ บอทของเสิร์ชเอ็นจิ้นสามารถมุ่งเน้นไปที่หน้าเว็บที่ทำให้คุณเข้าชมได้จริง
หากต้องการบล็อกการจัดทำดัชนีของหน้าที่ไม่ต้องการการค้นหา ให้ใช้แท็ก noindex meta robots บ็อตจะไม่สร้างดัชนี แต่จะยังคงรวบรวมข้อมูลและติดตามลิงก์ในหน้านั้น เพื่อให้บริบทเพิ่มเติมเกี่ยวกับเว็บไซต์ของคุณ
เพจมีค่าสำหรับเสิร์ชเอ็นจิ้นเท่านั้น
ไม่ใช่ทุกหน้าที่มีไว้เพื่อช่วยเหลือผู้ใช้ บางส่วนช่วยให้เครื่องมือค้นหาเรียนรู้เกี่ยวกับเว็บไซต์ของคุณและค้นพบลิงก์
ดู หน้า LinkedIn นี้:
มันแสดงรายการโปรไฟล์ของผู้ใช้ทั้งหมด ทำให้เครื่องมือค้นหาสามารถค้นหาลิงก์ทั้งหมดได้ง่าย
ในอีกด้านหนึ่ง หน้าเหล่านี้อาจทำให้ผู้ใช้สับสนและไม่สนับสนุนให้อยู่ในไซต์ต่อไป ไม่มีค่าสำหรับพวกเขา ดังนั้นจึงไม่ควรปรากฏในผลการค้นหาและไม่ควรจัดทำดัชนี
ในทางกลับกัน พวกมันมีประโยชน์สำหรับเสิร์ชเอ็นจิ้น – มันช่วยเพิ่มการเชื่อมโยงภายในของคุณ
นั่นเป็นเหตุผลที่ทางออกที่ดีที่สุดคือการติดตั้งแท็กโรบ็อตเมตา noindex ออกจากหน้าเหล่านี้ออกจากแผนผังเว็บไซต์ และอนุญาตให้มีการรวบรวมข้อมูลใน robots.txt พวกเขาจะไม่ได้รับการจัดทำดัชนี แต่บอทจะรวบรวมข้อมูล
เพจไม่มีค่าสำหรับใคร
บางหน้าไม่มีค่าสำหรับผู้ใช้หรือเครื่องมือค้นหา
กฎหมายกำหนดให้มีบางส่วนอยู่ในไซต์ของคุณ เช่น นโยบายความเป็นส่วนตัว แต่บอกตามตรง ไม่มีใครค้นหาเนื้อหาประเภทนี้ แน่นอน คุณไม่สามารถลบออกได้ แต่ไม่จำเป็นต้องสร้างดัชนีเพราะไม่มีใครต้องการค้นหา ในบางกรณี อาจมีอันดับเหนือกว่าเนื้อหาที่มีคุณค่ามากกว่าและ "ขโมย" การเข้าชม
หน้าที่ไม่มีคุณค่ายังรวมถึงเนื้อหาคุณภาพต่ำที่บาง คุณควรให้ความสนใจเป็นพิเศษกับพวกเขา เนื่องจากอาจส่งผลเสียต่อวิธีที่ผู้ใช้และเครื่องมือค้นหารับรู้ถึงคุณภาพโดยรวมของไซต์ของคุณ อ้างถึง เนื้อหาคุณภาพต่ำสามารถสร้างความเสียหายให้กับ บทเว็บไซต์ของคุณสำหรับข้อมูลเพิ่มเติม
สิ่งสำคัญที่สุดคือ คุณต้อง ตรวจสอบให้แน่ใจว่าหน้าเว็บที่ไม่มีค่ามีแท็ก noindex meta robots หากคุณไม่บล็อกการจัดทำดัชนี การจัดอันดับอาจส่งผลเสียต่อการจัดอันดับและทำให้ผู้ใช้ไม่เข้าชมเว็บไซต์ของคุณ
นอกจากนี้ หากคุณต้องการเพิ่มประสิทธิภาพงบประมาณการรวบรวมข้อมูล ให้บล็อกหน้าเหล่านี้ในไฟล์ robots.txt และลบลิงก์ภายในที่ชี้ไปยังหน้าเหล่านี้ ซึ่งจะช่วยให้คุณประหยัดงบประมาณการตระเวนสำหรับเพจที่มีค่ามากขึ้น
ห่อ
การรู้ว่าหน้าใดของคุณควรและไม่ควรจัดทำดัชนี และสื่อสารกับบอทของเครื่องมือค้นหาเป็นสิ่งสำคัญในการ สร้างกลยุทธ์การจัดทำดัชนีที่ดี
จะเพิ่มโอกาสสูงสุดที่เว็บไซต์ของคุณจะถูกรวบรวมข้อมูลและจัดทำดัชนีอย่างเหมาะสม และทำให้ผู้ใช้ของคุณสามารถค้นหาเนื้อหาที่มีคุณค่าทั้งหมดของคุณในผลการค้นหา
ต่อไปนี้คือประเด็นสำคัญที่คุณต้องคำนึงถึงขณะสร้างกลยุทธ์การจัดทำดัชนี:
- เมื่อตัดสินใจว่าควรสร้างดัชนีหน้าหรือไม่ ให้ถามตัวเองว่าหน้านั้นมี เนื้อหาเฉพาะที่มีคุณค่าต่อผู้ใช้หรือไม่ หน้าเว็บที่มีคุณค่าและไม่ซ้ำใครไม่ควรถูกบล็อกจากการจัดทำดัชนีโดยแท็ก noindex meta robots หรือบล็อกจากการรวบรวมข้อมูลโดยใช้คำสั่ง disallow ของ robots.txt
- หากเนื้อหาคุณภาพต่ำของคุณจัดทำดัชนีได้ อาจส่งผลเสียต่อการจัดอันดับของคุณ และทำให้หน้าที่มีค่าของคุณเสี่ยงต่อการไม่ได้รับการจัดทำดัชนี
- หากคุณมีเนื้อหาที่ซ้ำกันหรือใกล้เคียงกันในเว็บไซต์ของคุณ คุณควรรวมเข้ากับแท็กตามรูปแบบบัญญัติหรือการเปลี่ยนเส้นทาง 301
- หากหน้าไม่มีความต้องการค้นหา ก็ไม่จำเป็นต้องจัดทำดัชนี ใช้ noindex ในแท็ก meta robots
- หน้าที่มีเนื้อหาหรือลิงก์ที่มีค่าสำหรับเครื่องมือค้นหาเท่านั้นควรถูกบล็อกจากการจัดทำดัชนีโดยใช้แท็ก noindex meta robots แต่อย่าปิดกั้นไม่ให้มีการรวบรวมข้อมูลใน robots.txt
- หากทั้งผู้ใช้และเสิร์ชเอ็นจิ้นไม่ได้รับประโยชน์จากการเยี่ยมชมหน้าใดหน้าหนึ่ง ควรตั้งค่าให้เป็น noindex ในแท็ก meta robots
- หากคุณมีหน้าเดียวกันหลายภาษาสำรอง ให้จัดทำดัชนีได้ ใช้แท็ก hreflang เพื่อช่วยให้เครื่องมือค้นหาเข้าใจว่าหน้าเหล่านี้เกี่ยวข้องกันอย่างไร