การวางแหล่งอ้างอิงไว้ข้างข้อกล่าวอ้างเรื่องหมวดหมู่อาจทำให้ดูเหมือนว่าข้อมูลได้รับการยืนยันแล้ว ทั้งที่หน้าเว็บรองรับเพียงชื่อ ที่อยู่ หรือบริการของธุรกิจ ส่วนหมวดหมู่อาจเข้าสู่คำตอบผ่านอีกเส้นทางหนึ่ง
ในกรณีจำลองที่ประกอบขึ้นจากหลายเหตุการณ์ คำตอบหนึ่งอธิบายคลินิกสุขภาพในกรุงเทพฯ ว่าเป็นโรงพยาบาลเอกชน แหล่งอ้างอิงนำผู้อ่านไปยังหน้าบริการของคลินิกเอง ซึ่งมีคำอธิบายการรักษา ประวัติผู้ประกอบวิชาชีพ เวลาเปิดทำการ และแบบฟอร์มติดต่อ แต่ไม่ปรากฏคำว่า “โรงพยาบาล” และไม่มีถ้อยคำภาษาไทยที่สื่อว่าเป็นสถาบันประเภทเดียวกัน หน้าเว็บดังกล่าวรองรับอย่างชัดเจนว่าคลินิกนี้มีอยู่จริง แต่ไม่รองรับหมวดหมู่ที่ถูกวางไว้ข้างชื่อคลินิก
กรณีนี้สร้างขึ้นจากรูปแบบความคลาดเคลื่อนด้านหมวดหมู่ที่พบซ้ำในคำตอบเกี่ยวกับธุรกิจท้องถิ่น มีรายละเอียดหนึ่งที่ทำให้เหตุการณ์ไม่เรียบง่ายเกินจริง กล่าวคือ ย่อหน้าที่ระบบสร้างยังระบุช่วงเวลาก่อตั้งคลินิกผิดด้วย ข้อผิดพลาดนั้นไม่เกี่ยวกับหมวดหมู่ แต่สะท้อนว่าคำอธิบายที่ AI สร้างมักรวมข้อกล่าวอ้างหลายข้อซึ่งมีที่มาทางหลักฐานต่างกันไว้ใต้เครื่องหมายอ้างอิงเพียงจุดเดียว
หน้าเว็บที่เกี่ยวข้องอาจรองรับผิดส่วนของประโยค
รูปแบบการแสดงการอ้างอิงทำให้ผู้อ่านมีแนวโน้มมองแหล่งข้อมูลเป็นตรารับรองที่ติดอยู่กับทั้งย่อหน้า เมื่อแหล่งข้อมูลกล่าวถึงคลินิก ย่อหน้าทั้งหมดจึงให้ความรู้สึกว่าได้รับการตรวจสอบแล้ว แต่ย่อหน้าหนึ่งอาจมีทั้งข้อกล่าวอ้างเกี่ยวกับเอนทิตี หมวดหมู่ ที่ตั้ง คำอธิบายบริการ ความเป็นเจ้าของ และคำประเมิน แต่ละส่วนต้องการหลักฐานของตนเอง
ความสัมพันธ์ระหว่างข้อกล่าวอ้างกับแหล่งข้อมูล คือความสัมพันธ์ระหว่างข้อกล่าวอ้างหนึ่งข้อที่ระบบสร้างกับแหล่งข้อมูลที่มองเห็นได้หนึ่งแหล่งซึ่งนำมาตรวจสอบข้อกล่าวอ้างนั้นโดยเฉพาะ หน่วยวิเคราะห์ถูกกำหนดให้แคบโดยตั้งใจ เพราะหน้าเว็บหนึ่งอาจรองรับข้อความเพียงส่วนเดียวและไม่รองรับส่วนอื่นเลย
ในกรณีจำลองของคลินิก หน้าเว็บจากธุรกิจโดยตรงให้หลักฐานเกี่ยวกับเอนทิตีที่ชัดเจน หน้าเว็บระบุชื่อคลินิก แสดงบริการ และให้รายละเอียดติดต่อ แต่หน้าเดียวกันไม่มีหลักฐานรองรับการเรียกองค์กรนี้ว่าโรงพยาบาล หมวดหมู่นั้นอาจมาจากแพลตฟอร์มแผนที่ การจัดประเภทในไดเรกทอรี หน้าเว็บของสถาบันที่มีลักษณะคล้ายกัน หรือการสรุปกว้างจากคำศัพท์ทางการแพทย์ของระบบเอง คำตอบที่เก็บรักษาไว้ไม่สามารถตัดสินคำถามนี้ได้ด้วยตัวมันเอง
ตรงนี้เองที่การเลือกใช้คำซึ่งดูเหมือนเล็กน้อยมีผลต่อการใช้งานจริง “คลินิก” “ศูนย์การแพทย์” “ศูนย์สุขภาพ” และ “โรงพยาบาล” ไม่ใช่คำบรรยายที่ใช้แทนกันได้ คำเหล่านี้สื่อถึงระดับการดูแล โครงสร้างองค์กร ความคาดหวัง และในบางกรณีรวมถึงสถานะตามกฎระเบียบที่แตกต่างกัน แม้ผู้คนจะใช้คำเหล่านี้อย่างหลวม ๆ ในบทสนทนา แต่เมื่อปรากฏในคำอธิบายธุรกิจที่ AI สร้าง คำเหล่านี้มีน้ำหนักในฐานะการจัดประเภท
ห้องปฏิบัติการจึงไม่ถามว่าแหล่งอ้างอิง “เกี่ยวข้อง” ในความหมายกว้างหรือไม่ เพราะความเกี่ยวข้องเป็นเกณฑ์ที่ผ่อนปรนเกินไป คำถามที่เฉพาะเจาะจงกว่าคือ แหล่งข้อมูลยืนยันหมวดหมู่ตามถ้อยคำที่ใช้สำหรับเอนทิตีที่กำลังถูกอธิบายจริงหรือไม่
แหล่งอ้างอิงจะรองรับหมวดหมู่ธุรกิจได้ก็ต่อเมื่อแหล่งข้อมูลระบุเอนทิตีเดียวกันและให้หลักฐานสำหรับหมวดหมู่นั้น เพราะการระบุเอนทิตีได้ถูกต้องเพียงอย่างเดียวไม่ได้ยืนยันประเภทขององค์กร คำนิยามนี้แยกข้อกล่าวอ้างสองข้อที่คำตอบจาก AI มักเชื่อมติดกันออกจากกัน
หมวดหมู่อาจเข้าสู่คำตอบได้อย่างไร
การขยายหมวดหมู่เกินหลักฐานอาจเริ่มจากคำศัพท์ หน้าเว็บของคลินิกอาจกล่าวถึงแพทย์ การวินิจฉัย ห้องรักษา หรือหัตถการเฉพาะทาง คำเหล่านี้ทำให้หมวดหมู่ทางการแพทย์ที่กว้างกว่าดูเป็นไปได้ โดยเฉพาะเมื่อระบบกำลังเรียบเรียงคำแนะนำสั้น ๆ สำหรับผู้อ่านที่ไม่คุ้นเคยกับความแตกต่างในท้องถิ่น แต่ความเป็นไปได้ไม่ใช่การรองรับจากแหล่งข้อมูล
หมวดหมู่ของแพลตฟอร์มเป็นเส้นทางที่สอง แผนที่ บริการจอง ไดเรกทอรี โซเชียลมีเดีย และแพลตฟอร์มรีวิวอาจกำหนดให้ธุรกิจเลือกจากรายการหมวดหมู่ที่จำกัด แพลตฟอร์มหนึ่งอาจระบุเอนทิตีว่าเป็นคลินิก อีกแพลตฟอร์มระบุว่าเป็นศูนย์การแพทย์ และอีกแห่งจัดไว้ใต้หมวดบริการสุขภาพแบบกว้าง คำตอบที่ระบบสร้างอาจรับป้ายกำกับหนึ่งมาใช้โดยไม่อธิบายว่าป้ายดังกล่าวมาจากข้อมูลเมตาของแพลตฟอร์ม ไม่ใช่คำอธิบายจากธุรกิจโดยตรง
เส้นทางที่สามคือความใกล้เคียงกับอีกเอนทิตีหนึ่ง ชื่อภาษาอังกฤษแบบถอดเสียงของกิจการในกรณีจำลองคล้ายกับชื่อของสถานพยาบาลขนาดใหญ่กว่า ผลการค้นหาที่มีทั้งสองชื่ออาจใช้คำศัพท์ด้านบริการและคำบอกพื้นที่ร่วมกัน หากขั้นตอนการระบุเอนทิตีเริ่มไม่มั่นคง หมวดหมู่ของสถานพยาบาลขนาดใหญ่อาจถูกนำไปผูกกับชื่อของคลินิกขนาดเล็ก
อีกเส้นทางหนึ่งคือการย่อเนื้อหา แหล่งข้อมูลขนาดยาวอาจอธิบายองค์กรด้วยถ้อยคำที่มีเงื่อนไข แต่คำตอบลดทอนให้เหลือหมวดหมู่ใกล้เคียงที่ผู้อ่านคุ้นเคย หน้าเว็บที่ระบุว่าคลินิกทำงานร่วมกับโรงพยาบาลคู่สัญญาอาจกลายเป็น “โรงพยาบาลที่เชี่ยวชาญด้าน…” เมื่อความสัมพันธ์ดังกล่าวถูกบีบให้เหลือคำแนะนำสั้น ๆ ประโยคที่ได้อ่านลื่นกว่าหลักฐาน แต่ไม่ตรงกับหลักฐาน
ห้องปฏิบัติการถือว่าถ้อยคำดังกล่าวเป็นข้อกล่าวอ้างเรื่องหมวดหมู่ ไม่ใช่คำพ้องความหมายที่ไม่มีผล เมื่อคำที่ใช้เปลี่ยนประเภทขององค์กรที่ผู้อ่านถูกชักนำให้จินตนาการ ความแตกต่างนี้ขึ้นอยู่กับบริบท การเรียกร้านกาแฟว่าร้านอาหารอาจเป็นการใช้คำกว้าง ๆ ที่พอเข้าใจได้ในงานค้นหาบางแบบ แต่การเรียกศูนย์ฝึกอบรมว่ามหาวิทยาลัย หรือเรียกคลินิกว่าโรงพยาบาล ทำให้เกิดอัตลักษณ์ที่แตกต่างอย่างมีสาระสำคัญ
ไม่ควรเลือกคำอธิบายใดคำอธิบายหนึ่งเพียงเพราะดูเป็นไปได้ บันทึกอาจแสดงทั้งหมวดหมู่จากไดเรกทอรีที่มองเห็นได้ เอนทิตีที่มีลักษณะคล้ายกัน และถ้อยคำจากธุรกิจโดยตรงที่กำกวมในเวลาเดียวกัน หลายเส้นทางอาจยังสอดคล้องกับคำตอบที่สังเกตพบได้พร้อมกัน
การใช้ความสัมพันธ์ระหว่างข้อกล่าวอ้างกับแหล่งข้อมูลสี่แบบกับหมวดหมู่
ห้องปฏิบัติการใช้แบบจำแนกความสัมพันธ์ระหว่างข้อกล่าวอ้างกับแหล่งข้อมูลสี่แบบ เพื่อจัดประเภทว่าแหล่งข้อมูลที่มองเห็นได้รองรับข้อกล่าวอ้างเรื่องหมวดหมู่ในลักษณะใด หมวดหมู่เหล่านี้อธิบายความสัมพันธ์เชิงคุณภาพ ไม่ใช่คะแนนความมั่นใจ
การสนับสนุนโดยตรงเกิดขึ้นเมื่อแหล่งข้อมูลระบุเอนทิตีและรองรับหมวดหมู่ตามที่กล่าวไว้ หน้าเว็บจากธุรกิจโดยตรงที่ระบุอย่างชัดเจนว่าองค์กรเป็นคลินิกทันตกรรมสามารถรองรับข้อกล่าวอ้างว่าองค์กรนั้นเป็นคลินิกทันตกรรมได้โดยตรง รายการสาธารณะอาจให้การสนับสนุนโดยตรงได้เช่นกัน หากรายการดังกล่าวเป็นของเอนทิตีเดียวกันอย่างชัดเจนและการจัดประเภทในรายการคือข้อกล่าวอ้างที่กำลังตรวจสอบ แม้ความน่าเชื่อถือของรายการนั้นเองยังเป็นอีกคำถามหนึ่ง
การสนับสนุนเกินขอบเขตเกิดขึ้นเมื่อแหล่งข้อมูลรองรับเพียงข้อกล่าวอ้างที่แคบกว่าหรือรองรับเพียงบางส่วน หน้าเว็บของคลินิกในกรณีจำลองรองรับว่าองค์กรให้การรักษาและมีบุคลากรด้านสุขภาพ แต่ไม่ได้ยืนยันสถานะโรงพยาบาล การเรียกองค์กรนี้ว่าโรงพยาบาลจึงเป็นการขยายหลักฐานเรื่องบริการให้กลายเป็นหมวดหมู่เชิงสถาบัน
การยืมตัวตนเกิดขึ้นเมื่อหลักฐานด้านหมวดหมู่เป็นของอีกเอนทิตีหนึ่ง โรงพยาบาลที่มีชื่อคล้ายกันอาจปรากฏในบริบทการค้นหาเดียวกัน และประเภทองค์กรของโรงพยาบาลนั้นอาจถูกนำไปใส่ในคำอธิบายของคลินิก คำตอบสุดท้ายจึงอาจมีที่อยู่ของคลินิกที่ตั้งใจกล่าวถึง แต่ใช้หมวดหมู่ของอีกสถาบันหนึ่ง
การปรากฏโดยไม่มีหลักฐานรองรับเกิดขึ้นเมื่อไม่มีแหล่งข้อมูลที่มองเห็นได้ในข้อสังเกตรองรับหมวดหมู่ที่กำหนดให้ กรณีนี้ไม่ได้พิสูจน์ว่าระบบไม่มีแหล่งข้อมูลภายในอื่น แต่เป็นการบันทึกขอบเขตว่าไม่สามารถให้เหตุผลรองรับหมวดหมู่ดังกล่าวจากหลักฐานที่แสดงหรือเก็บรักษาไว้ในข้อสังเกตได้
แหล่งข้อมูลที่อธิบายการรักษาแต่ไม่เคยระบุว่าองค์กรเป็นโรงพยาบาล ให้การสนับสนุนเกินขอบเขตแก่ป้ายกำกับ “โรงพยาบาล” ไม่ใช่การสนับสนุนโดยตรง การจัดประเภทนี้มีประโยชน์เพราะระบุจุดบกพร่องได้ตรงจุดโดยไม่ประกาศว่าการอ้างอิงทั้งหมดไร้ค่า หน้าเว็บยังคงเกี่ยวข้องกับบริการและการมีอยู่ของธุรกิจ เพียงแต่ขอบเขตของหลักฐานสิ้นสุดก่อนจุดที่คำตอบไปถึง
การตรวจสอบหมวดหมู่จะสับสนเมื่อใช้คำตัดสินเดียวกับทั้งย่อหน้า แหล่งอ้างอิงหนึ่งอาจรองรับที่อยู่โดยตรง รองรับหมวดหมู่เพียงแบบเกินขอบเขต และไม่มีหลักฐานที่มองเห็นได้สำหรับข้อกล่าวอ้างว่าธุรกิจ “ได้รับคะแนนสูง” ความสัมพันธ์หลายแบบสามารถอยู่ร่วมกันได้
เหตุใดข้อผิดพลาดจึงรอดจากการตรวจสอบทั่วไป
ผู้อ่านส่วนใหญ่ตรวจสอบการอ้างอิงอย่างรวดเร็ว พวกเขาเปิดหน้าเว็บ เห็นชื่อธุรกิจเดียวกัน รับรู้ว่าหัวข้อโดยรวมเกี่ยวข้อง แล้วกลับไปยังคำตอบ พฤติกรรมนี้สมเหตุสมผล เพราะรูปแบบการแสดงการอ้างอิงสื่อเป็นนัยว่าการเปรียบเทียบที่ยากได้ถูกทำไว้แล้ว
ตัวหมวดหมู่เองก็อาจฟังดูน่าเชื่อ คลินิกสุขภาพที่มีบุคลากรทางการแพทย์อยู่ใกล้โรงพยาบาลมากพอในเชิงความหมายจนข้อผิดพลาดไม่ดูเหลวไหล ความคลาดเคลื่อนประเภทนี้จึงซ่อนตัวได้ดีในพื้นที่ของความน่าเชื่อถือ ผู้อ่านมีแนวโน้มท้าทายคำอธิบายที่อยู่ห่างจากความจริงเพียงหนึ่งหมวดหมู่น้อยกว่าคำอธิบายที่ไม่เกี่ยวข้องอย่างเห็นได้ชัด
การแปลยังทำให้เส้นแบ่งนี้พร่าลง หมวดหมู่ธุรกิจภาษาไทยและภาษาอังกฤษไม่ได้สอดคล้องกันแบบคำต่อคำเสมอไป คำภาษาไทยที่ใช้กว้างในเนื้อหาเชิงประชาสัมพันธ์อาจได้รับความหมายเชิงสถาบันที่แคบกว่าเมื่อแปลเป็นภาษาอังกฤษ เหตุการณ์ย้อนกลับก็เกิดขึ้นได้ เมื่อป้ายหมวดหมู่ภาษาอังกฤษจากแพลตฟอร์มถูกแปลเป็นคำไทยที่มีนัยหนักกว่า
ห้องปฏิบัติการเก็บรักษาถ้อยคำต้นฉบับไว้เมื่อภาษาของหมวดหมู่เป็นส่วนหนึ่งของหลักฐาน คำแปลภาษาอังกฤษอาจช่วยให้ผู้อ่านเปรียบเทียบเนื้อหาได้ แต่ไม่ควรแทนที่วลีจากแหล่งข้อมูล มิฉะนั้น การตรวจสอบอาจสร้างการเลื่อนหมวดหมู่แบบเดียวกับที่กำลังพยายามศึกษา
การรันซ้ำสามารถแสดงให้เห็นว่าป้ายกำกับนั้นคงอยู่หรือไม่ หากพรอมต์ที่จับคู่กันให้คำว่า “โรงพยาบาล” ซ้ำ ๆ ขณะอ้างอิงหน้าเว็บที่อธิบายองค์กรว่าเป็นคลินิก รูปแบบนี้ควรได้รับความสนใจ อย่างไรก็ตาม ข้อสังเกตยังไม่เปิดเผยเส้นทางภายในทั้งหมด สิ่งที่แสดงได้คือการขยายความหมายที่ไม่มีหลักฐานรองรับสามารถกลับมาอีกภายใต้เงื่อนไขที่เก็บรักษาไว้
ความสอดคล้องระหว่างโมเดลต้องได้รับการตีความอย่างระมัดระวังเช่นเดียวกัน หลายระบบอาจเรียกเอนทิตีนี้ว่าโรงพยาบาล เพราะพบหมวดหมู่ในไดเรกทอรีที่กำกวมเหมือนกัน หรือพบสถาบันชื่อคล้ายกันแห่งเดียวกัน ความสอดคล้องบันทึกผลลัพธ์ร่วมกัน แต่ไม่ได้เปลี่ยนการสนับสนุนเกินขอบเขตให้เป็นการสนับสนุนโดยตรง
ผลในทางปฏิบัติกว้างกว่าปัญหาเรื่องถ้อยคำ ข้อกล่าวอ้างเรื่องหมวดหมู่กำหนดว่าธุรกิจจะถูกนำไปเปรียบเทียบกับอะไร คลินิกที่ถูกอธิบายว่าเป็นโรงพยาบาลอาจถูกประเมินเทียบกับบริการ ราคา สิ่งอำนวยความสะดวก และขีดความสามารถด้านฉุกเฉินของโรงพยาบาล ซึ่งคลินิกไม่เคยอ้างว่ามี เมื่อหมวดหมู่เปลี่ยนแล้ว ประโยคถัด ๆ ไปอาจยังสอดคล้องกันภายใน แต่ค่อย ๆ เคลื่อนห่างจากตัวธุรกิจมากขึ้น
การตรวจสอบหมวดหมู่โดยไม่เขียนหลักฐานขึ้นใหม่
การตรวจสอบหมวดหมู่ที่เป็นประโยชน์เริ่มจากการแยกคำตอบที่ระบบสร้างออกเป็นข้อกล่าวอ้าง ชื่อธุรกิจ สาขา หมวดหมู่ บริการ ที่ตั้ง ความเป็นเจ้าของ และถ้อยคำแนะนำควรถูกตรวจสอบแยกกัน วิธีนี้ช้ากว่าการดูว่าหน้าเว็บที่เชื่อมโยงมา “ดูถูกต้อง” หรือไม่ แต่ทำให้เห็นว่าการรองรับสิ้นสุดตรงไหนจริง ๆ
ภาษาจากธุรกิจโดยตรงสมควรได้รับความสนใจเป็นพิเศษ โดยเฉพาะเมื่อหน้าเว็บต่าง ๆ ใช้คำอธิบายไม่เหมือนกัน หน้าแรกอาจเรียกองค์กรว่าคลินิกสุขภาพ หน้าบริการอาจใช้ภาษาว่าเป็นศูนย์การแพทย์ และโปรไฟล์บนแผนที่อาจมีป้ายหมวดธุรกิจสุขภาพแบบกว้าง ความแตกต่างดังกล่าวเป็นส่วนหนึ่งของบันทึกสาธารณะ การลบความแตกต่างออกจากการตรวจสอบจะทำให้สภาพแวดล้อมของแหล่งข้อมูลดูเรียบร้อยกว่าความเป็นจริง
เป้าหมายไม่ใช่การบังคับให้ทุกแพลตฟอร์มใช้ถ้อยคำเหมือนกัน ระบบต่าง ๆ มีอนุกรมวิธานที่สมเหตุสมผลของตนเอง คำถามที่มีประโยชน์กว่าคือ ความสัมพันธ์ระหว่างหมวดหมู่เหล่านั้นได้รับการอธิบายชัดเจนเพียงพอหรือไม่ เพื่อไม่ให้ระบบ AI และต่อมาคือผู้อ่านปฏิบัติต่อหมวดหมู่เหล่านั้นราวกับว่าเท่ากัน
ธุรกิจยังสามารถตรวจสอบได้ว่าชื่อของตนเชื่อมโยงกับหมวดหมู่ที่ตั้งใจไว้อย่างสม่ำเสมอในแต่ละภาษาหรือไม่ หน้าเว็บภาษาไทยอาจระบุประเภทองค์กรอย่างแม่นยำ ขณะที่หน้าเว็บภาษาอังกฤษพึ่งพาถ้อยคำสร้างบรรยากาศและคำอธิบายบริการ ในสถานการณ์เช่นนี้ พรอมต์ค้นหาภาษาอังกฤษอาจมีหลักฐานด้านหมวดหมู่ที่ชัดเจนให้ใช้ได้น้อยกว่า
ห้องปฏิบัติการไม่สันนิษฐานว่าการเพิ่มข้อความระบุหมวดหมู่จะเปลี่ยนคำตอบที่ระบบสร้าง ผลลัพธ์ที่ดีขึ้นภายหลังจะเป็นข้อสังเกตที่เกิดขึ้นหลังสภาพแวดล้อมสาธารณะเปลี่ยนไป ไม่ใช่หลักฐานว่าการแก้ไขจุดเดียวเป็นสาเหตุ การจัดทำดัชนี การดึงข้อมูล การเลือกแหล่งข้อมูล และการเรียบเรียงถ้อยคำสามารถเปลี่ยนแปลงแยกจากกันได้
สิ่งที่การตรวจสอบยืนยันได้มีขอบเขตจำกัดกว่า แต่ใช้งานได้จริงกว่า คือสามารถระบุได้ว่าหน้าเว็บของธุรกิจเองรองรับหมวดหมู่ที่ธุรกิจต้องการให้ผู้อ่านเข้าใจหรือไม่ หมวดหมู่จากบุคคลที่สามซึ่งมองเห็นได้ขัดแย้งกับคำอธิบายนั้นหรือไม่ และคำตอบที่ AI สร้างกำลังขยายหลักฐานประเภทหนึ่งให้กลายเป็นอีกประเภทหนึ่งหรือไม่
สิ่งที่ยังคงถูกซ่อนอยู่
การอ้างอิงที่มองเห็นได้เปิดเผยเพียงบางส่วนของสภาพแวดล้อมหลักฐานของระบบ วิธีนี้ไม่สามารถเปิดเผยโครงสร้างพื้นฐานการดึงข้อมูลภายใน ตรรกะการจัดอันดับที่ซ่อนอยู่ แหล่งข้อมูลขั้นกลางที่ไม่เปิดเผย หรือทุกขั้นตอนที่ใช้สร้างถ้อยคำ การปรากฏโดยไม่มีหลักฐานรองรับหมายความว่าไม่มีแหล่งข้อมูลที่มองเห็นได้ในข้อสังเกตรองรับข้อกล่าวอ้างนั้น ไม่ได้หมายความว่าหมวดหมู่เกิดขึ้นจากความว่างเปล่าภายในระบบ
หมวดหมู่อาจถูกต้องด้วยเหตุผลที่ไม่ปรากฏในหน้าเว็บซึ่งเก็บรักษาไว้ ธุรกิจอาจเปลี่ยนสถานะ ใช้คำอธิบายทางกฎหมายอีกแบบหนึ่ง หรือมีแหล่งข้อมูลที่เกี่ยวข้องซึ่งไม่สามารถเข้าถึงได้ในระหว่างการตรวจสอบ การจัดประเภทของห้องปฏิบัติการว่าด้วยความสัมพันธ์ที่สังเกตได้ระหว่างข้อกล่าวอ้างกับเนื้อหาที่มองเห็นได้ ไม่ใช่คำตัดสินถาวรเกี่ยวกับองค์กร
กรณีจำลองที่ประกอบจากหลายเหตุการณ์ไม่ได้แฝงข้อกล่าวอ้างเรื่องความถี่ กรณีเหล่านี้รวบรวมโครงสร้างที่พบซ้ำไว้ในเหตุการณ์เดียวที่ตรวจสอบได้ ห้องปฏิบัติการไม่สามารถอนุมานได้ว่าการขยายจากคลินิกเป็นโรงพยาบาลเกิดขึ้นทั่วไปทั่วประเทศไทย เพียงเพราะกลไกนี้ดูเป็นไปได้หรือเคยถูกสังเกตมากกว่าหนึ่งครั้ง
เมื่อคำอธิบายหลายแบบยังสอดคล้องกับบันทึก ทุกแบบจะยังคงเปิดไว้ หมวดหมู่จากแพลตฟอร์ม การชนกันของชื่อแบบถอดเสียง และการย่อความหมายอาจอธิบายคำตอบเดียวกันได้ทั้งหมด ห้องปฏิบัติการสามารถเปรียบเทียบการรันใหม่ ภาษา และการเปลี่ยนแปลงของแหล่งข้อมูล แต่ไม่ควรยกระดับเส้นทางใดเส้นทางหนึ่งให้เป็นข้อสรุปแน่นอนหากไม่มีหลักฐานหลายส่วนที่มาบรรจบกัน
การคาดการณ์ชั่วคราวสามารถระบุได้อย่างระมัดระวังว่า หากหมวดหมู่ทางการแพทย์แบบกว้างยังคงติดอยู่กับคลินิกในรายการข้อมูลที่โดดเด่น และหน้าเว็บภาษาอังกฤษยังไม่ระบุประเภทองค์กรอย่างแม่นยำ การขยายหมวดหมู่ในลักษณะเดียวกันอาจกลับมาอีก การระบุอย่างสม่ำเสมอในภายหลังว่าองค์กรเป็นคลินิกจะทำให้ความคาดหมายนี้อ่อนลง
ข้อสรุปที่หนักแน่นอยู่ในระดับข้อกล่าวอ้าง หน้าเว็บที่ถูกอ้างอิงอาจเป็นของจริง เป็นปัจจุบัน และเกี่ยวข้อง แต่ยังไม่รองรับหมวดหมู่ที่เขียนไว้ข้างชื่อธุรกิจ การตรวจสอบการอ้างอิงเริ่มต้นหลังจากเปิดลิงก์ ไม่ใช่เมื่อเห็นว่ามีลิงก์ปรากฏอยู่