การวิเคราะห์ Agent

เมื่อผู้ใช้ถามคำถามกับเครื่องมือค้นหาคำตอบ เครื่องมือนั้นจำเป็นต้องหาข้อมูลเพื่อสร้างคำตอบ มันจะส่งบอทเฉพาะทางที่เรียกว่า AI crawler ออกไปอ่านหน้าเว็บ ซึ่งรวมถึง GPTBot สำหรับ ChatGPT, ClaudeBot สำหรับ Claude, PerplexityBot และ Google-Extended สำหรับโมเดล AI ของ Google

ไฟล์ robots.txt ของเว็บไซต์คุณคือผู้ควบคุมประตูบานแรก มันบอกบอทเหล่านี้ว่าส่วนใดของไซต์คุณที่พวกเขาได้รับอนุญาตให้เข้าไปเยี่ยมชม การตรวจสอบ robots.txt สำหรับ AI crawler คือกระบวนการตรวจสอบไฟล์นี้เพื่อดูว่าคุณกำลังต้อนรับหรือบล็อกบอทตัวใด มันเป็นส่วนพื้นฐานของเทคนิค SEO สำหรับการค้นหาแบบ AI หากหน้าสำคัญของคุณถูกบล็อก พวกมันจะไม่สามารถถูกอ่านได้ และจะไม่ปรากฏเป็นแหล่งอ้างอิงในคำตอบจาก AI

SEO แบบดั้งเดิมมุ่งเน้นการจัดอันดับในรายการลิงก์สีน้ำเงินสิบอันดับ แต่ AI search หรือการปรับแต่งเพื่อเครื่องมือค้นหาที่ให้คำตอบนั้นแตกต่างกัน เป้าหมายคือการเป็นหนึ่งในแหล่งข้อมูลไม่กี่แห่งที่ถูกอ้างอิงในย่อหน้าที่ถูกสร้างขึ้นมาเพียงย่อหน้าเดียว เครื่องมือค้นหาเหล่านี้มีความเลือกสรร และพวกเขาจะอ้างอิงเฉพาะหน้าที่ครอว์เลอร์ของพวกเขาได้รับอนุญาตให้อ่านเท่านั้น

การอนุญาตให้ครอว์เลอร์ของ AI เข้าถึงได้คือขั้นตอนแรกที่ต้องทำ หาก GPTBot ไม่สามารถเข้าถึงบล็อกของคุณได้ ChatGPT ก็ไม่สามารถเรียนรู้จากมันได้ หากบล็อก Google-Extended คุณก็จะมองไม่เห็นใน Google AI Overviews การตรวจสอบนี้ไม่เกี่ยวกับปริมาณการเข้าชม แต่เกี่ยวกับคุณสมบัติที่ได้รับอนุญาต คุณกำลังตรวจสอบตั๋วเข้าสู่สนามแข่งขันที่คำตอบจาก AI ถูกเขียนขึ้น

Agent Analytics ซึ่งอยู่ที่ /dashboard/crawlers จะให้รายงานเชิงเทคนิคที่เน้นไปที่การค้นหาด้วย AI โดยทำงานด้วยการอ่านเว็บไซต์ของคุณจากภายนอก ในแบบเดียวกับที่บอท AI ทำ โดยจะตรวจสอบไฟล์ robots.txt และไฟล์ llms.txt ที่คุณตั้งค่าไว้ จากนั้นรายงานสิ่งที่พบ

หน้าจอถูกจัดระเบียบออกเป็นสามส่วน ส่วนการมองเห็นของ AI crawler จะแสดงรายชื่อบอท AI ที่รู้จัก เช่น GPTBot และ ClaudeBot และระบุชัดเจนว่ากฎปัจจุบันของคุณอนุญาตหรือไม่อนุญาตให้พวกเขาเข้าถึง ส่วน Crawlability จะทำการดึงข้อมูลหน้าเว็บของคุณแบบจำลอง รายงานเวลาตอบสนอง ทรัพยากรที่ถูกบล็อก และวิธีการแสดงผลหน้าเว็บโดยไม่มี JavaScript พร้อมเน้นปัญหาที่อาจทำให้เนื้อหาของคุณอ่านไม่ได้ ส่วนการติดตามประสิทธิภาพเนื้อหา จะแสดงว่าหน้าใดของคุณกำลังถูกจัดทำดัชนีโดยบริการที่เกี่ยวข้องกับ AI และรวบรวมข้อมูลเกี่ยวกับข้อความเชื่อมโยงที่ชี้มายังเว็บไซต์ของคุณจากทั่วทั้งเว็บ

สำหรับนักการตลาด นี่คือเครื่องมือวินิจฉัยและติดตามผล เวิร์กโฟลว์ทั่วไปเริ่มต้นด้วยการตรวจสอบ เปิด Agent Analytics และตรวจสอบรายการการมองเห็นของ AI crawler สำหรับเว็บไซต์เปิดตัวผลิตภัณฑ์ใหม่ คุณควรตรวจสอบให้แน่ใจว่าบอทหลักทั้งหมดได้รับอนุญาตให้เข้าถึงเพจสำคัญและเพจเอกสารประกอบของคุณ

ถัดไป ใช้รายงานการเข้าถึงได้ กรองไปที่เพจที่มีความสำคัญสูง เช่น คำอธิบายบริการหลักของคุณ มองหาข้อเตือนเกี่ยวกับไฟล์ CSS หรือ JavaScript ที่ถูกบล็อก ซึ่งอาจทำให้เพจแสดงผลไม่ถูกต้องสำหรับบอท แก้ไขปัญหาเหล่านั้นในโค้ดของคุณ สุดท้าย ตรวจสอบประสิทธิภาพของเนื้อหารายสัปดาห์ มองหาเพจใหม่ที่เข้าสู่รายการ 'indexed' ซึ่งบ่งชี้ว่าบริการ AI กำลังเริ่มเก็บข้อมูลเพจเหล่านั้นแล้ว และตรวจสอบรายงาน anchor text เพื่อดูว่าเว็บไซต์อื่นๆ กำลังอธิบายแบรนด์ของคุณอย่างไรเมื่อพวกเขาเชื่อมโยงมายังคุณ

สถานะ 'อนุญาต' สีเขียวสำหรับ GPTBot หมายความว่าไฟล์ robots.txt ของคุณอนุญาตให้มันเข้าถึงได้ แต่ไม่ได้หมายความว่า GPTBot ได้เข้ามาเยี่ยมชมหรือเนื้อหาของคุณจะถูกอ้างอิง มันแค่หมายความว่าประตูเปิดอยู่ เวลาตอบสนองที่ช้าในรายงานการรวบรวมข้อมูลเป็นปัญหาที่ตรงไปตรงมา เนื่องจากบอทมีขีดจำกัดเวลาและอาจละทิ้งหน้าที่โหลดช้า

เมตริก 'ความครอบคลุมที่ถูกจัดทำดัชนี' แสดงว่าหน้าใดที่ระบบรู้จัก การเพิ่มขึ้นในส่วนนี้เป็นสัญญาณบวกที่บ่งบอกถึงการเติบโตของความสามารถในการมองเห็นด้วย AI รายงานข้อความเชื่อมโยงมีประโยชน์สำหรับการทำความเข้าใจการรับรู้แบรนด์ การเปลี่ยนแปลงจากการถูกเชื่อมโยงว่าเป็น 'เครื่องมือซอฟต์แวร์' เป็น 'แพลตฟอร์มการตลาด AI' สะท้อนถึงการเปลี่ยนแปลงของเรื่องเล่าในตลาด โปรดจำไว้ว่า สิ่งเหล่านี้เป็นตัวชี้วัดนำ ไม่ใช่คำสัญญาของปริมาณการเข้าชมหรือการอ้างอิง

การระบุข้อจำกัดอย่างชัดเจนเป็นสิ่งสำคัญ Agent Analytics อ่านเว็บไซต์ของคุณจากอินเทอร์เน็ตสาธารณะ ระบบไม่ได้นำเข้าข้อมูลจากบันทึกเซิร์ฟเวอร์ของคุณ การนำเข้าข้อมูลจากบันทึกเซิร์ฟเวอร์จะแสดงให้เห็นอย่างชัดเจนว่าบอตใดเข้ามาเยี่ยมชม, บ่อยแค่ไหน, และดึงข้อมูลอะไรไป รายละเอียดระดับนั้นยังไม่ได้ถูกสร้างขึ้น

ฟีเจอร์นี้ยังไม่สามารถเปรียบเทียบเว็บไซต์ของคุณกับเว็บไซต์อื่นได้ การบอกว่าความสามารถในการถูกคราวล์ของคุณอยู่ในเปอร์เซ็นไทล์ที่ 80 จำเป็นต้องมีกลุ่มตัวอย่างเว็บไซต์ที่เทียบเคียงได้จำนวนมากเพื่อใช้เป็นเกณฑ์วัด เราไม่มีกลุ่มตัวอย่างนั้น และเรายินดีที่จะไม่แสดงข้อมูลใดๆ มากกว่าที่จะให้เปอร์เซ็นไทล์ที่อาจทำให้เข้าใจผิดซึ่งมาจากตัวอย่างเพียงเว็บไซต์เดียว

แผนฟรีมีภาพรวมที่บันทึกไว้หนึ่งครั้งสำหรับสูงสุด 3 คำถามและ 3 หน้า ไม่ต้องใช้บัตร ไม่มีวันหมดอายุ Lite $29/เดือน · Growth $99/เดือน · Agency $249/เดือน (USD).

Growth: 50 คำถาม · 40 เครดิตร่างและเอเจนต์ที่แชร์/เดือน · $99/เดือน (USD).