คำแนะนำอาจฟังดูมีแหล่งข้อมูลรองรับอย่างดี เพราะโครงข้อเท็จจริงของมันมีการอ้างอิง ขณะที่คำตัดสินสำคัญ—ดีที่สุด น่าเชื่อถือ เหมาะอย่างยิ่ง ได้รับการยอมรับสูง—กลับเข้ามาผ่านอีกเส้นทางหนึ่งโดยสิ้นเชิง
คำตอบที่ระบบสร้างแนะนำร้านอาหารแห่งหนึ่งว่าให้ “อาหารท้องถิ่นที่ยอดเยี่ยมอย่างสม่ำเสมอ” และแสดงการอ้างอิงสามแหล่ง แหล่งหนึ่งยืนยันที่อยู่ อีกแหล่งระบุเมนูและเวลาเปิดทำการ ส่วนแหล่งที่สามเป็นของร้านซึ่งมีชื่อคล้ายกันในอีกจังหวัดหนึ่ง และมีความคิดเห็นเชิงบวกจากลูกค้าหลายข้อความ ไม่มีแหล่งใดยืนยันความสม่ำเสมอ ชื่อเสียงในหมู่คนท้องถิ่น หรือเหตุผลที่ร้านนี้ควรได้รับเลือกเหนือทางเลือกใกล้เคียง
นี่เป็นสถานการณ์สังเคราะห์ที่ประกอบขึ้นจากรูปแบบคำแนะนำซึ่งปรากฏซ้ำในงานของห้องปฏิบัติการ คำตอบยังสะกดชื่อสาขาหนึ่งผิด และให้เวลาปิดที่ถูกต้องเฉพาะวันธรรมดา ข้อผิดพลาดย่อยเหล่านี้มีประโยชน์ต่อการวิเคราะห์ เพราะช่วยลดความน่าเชื่อของคำอธิบายที่ว่าระบบได้ข้อสรุปอันมั่นคงจากการค้นคว้าอย่างลึกซึ้งแล้ว เพียงแต่ไม่แสดงหลักฐานออกมา
ประโยคแนะนำประกอบด้วยข้อกล่าวอ้างหลายชนิด
คำแนะนำแทบไม่เคยประกอบด้วยข้อกล่าวอ้างเพียงข้อเดียว ประโยคว่า “นี่คือร้านอาหารริมน้ำที่ได้รับการยอมรับสูง เหมาะอย่างยิ่งสำหรับครอบครัว และขึ้นชื่อเรื่องบริการที่เอาใจใส่” อาจดูเป็นหน่วยคำบรรยายเดียว แต่ประกอบด้วยข้อกล่าวอ้างเรื่องเอนทิตี ที่ตั้ง ความเหมาะสมกับผู้ใช้กลุ่มหนึ่ง ชื่อเสียง และการประเมินบริการ
แหล่งข้อมูลที่มองเห็นได้อาจสนับสนุนแต่ละส่วนไม่เท่ากัน หน้าแผนที่สามารถยืนยันที่ตั้ง เว็บไซต์ของร้านอาจกล่าวถึงที่นั่งสำหรับครอบครัว แพลตฟอร์มจองอาจจัดป้ายสถานที่ว่าอยู่ริมน้ำ แต่ไม่มีแหล่งใดจำเป็นต้องรองรับคำว่า “ได้รับการยอมรับสูง” หรือ “บริการเอาใจใส่” โดยเฉพาะเมื่อคำตอบนำเสนอคำตัดสินเหล่านั้นเป็นข้อเท็จจริงที่แน่นอน ไม่ใช่ความคิดเห็นที่ระบุแหล่งที่มา
ข้อกล่าวอ้างเชิงแนะนำเป็นข้อความประเมินค่า เพราะบอกผู้อ่านว่าควรให้คุณค่า เลือก หรือเปรียบเทียบกิจการอย่างไร หลักฐานที่จำเป็นขึ้นอยู่กับคำตัดสินที่ใช้ แหล่งข้อมูลซึ่งพิสูจน์ว่าร้านอาหารมีอยู่จริงไม่ได้พิสูจน์ว่าร้านนั้นดีเพียงเพราะเหตุนี้
ห้องปฏิบัติการจึงแยกคำตอบเชิงแนะนำออกเป็นข้อกล่าวอ้างย่อยก่อนประเมินการอ้างอิง วิธีนี้อาจดูจุกจิก จนกระทั่งสาระสำคัญของคำแนะนำแทบหายไปเมื่อถูกตรวจสอบ ในกรณีร้านอาหารสังเคราะห์ แหล่งข้อมูลยืนยันว่าสถานที่นั้นดำเนินงานอยู่ เสิร์ฟอาหารประจำภูมิภาค รับจอง และมีสาขาในกรุงเทพฯ ส่วนวลีชี้ขาด—“หนึ่งในตัวเลือกที่ปลอดภัยที่สุด” “ยอดเยี่ยมอย่างสม่ำเสมอ” และ “เป็นที่นิยมในหมู่ครอบครัวท้องถิ่น”—ยังคงมีหลักฐานรองรับเพียงเล็กน้อยหรือไม่มีหลักฐานรองรับเลย
ข้อความแนะนำมักยืมอำนาจความน่าเชื่อถือจากรายละเอียดข้อเท็จจริงที่อยู่ใกล้กัน เวลาเปิดทำการที่ถูกต้องกับที่อยู่ซึ่งคนจำได้ ทำให้คำประเมินฟังดูเหมือนผ่านการค้นคว้า ฐานข้อเท็จจริงของคำตอบทำหน้าที่เหมือนโต๊ะที่แข็งแรง แล้วมีถ้วยรางวัลซึ่งไม่มีหลักฐานรองรับถูกนำมาวางไว้ข้างบน
แหล่งข้อมูลอาจพิสูจน์ว่าเก้าอี้ตัวนั้นมีอยู่จริง ขณะที่คำตอบกลับมอบรางวัลที่หนึ่งให้มันอย่างเงียบ ๆ
นำความสัมพันธ์ระหว่างข้อกล่าวอ้างกับแหล่งข้อมูลสี่แบบมาใช้กับคำชม
ห้องปฏิบัติการใช้กรอบความสัมพันธ์ระหว่างข้อกล่าวอ้างกับแหล่งข้อมูลสี่แบบ ได้แก่ การสนับสนุนโดยตรง การสนับสนุนเกินขอบเขต การยืมตัวตน และการปรากฏโดยไม่มีหลักฐานรองรับ ประเภทเหล่านี้เป็นคำบรรยายเชิงคุณภาพของความสัมพันธ์กับแหล่งข้อมูลที่สังเกตพบ ไม่ใช่คะแนนคุณภาพของคำแนะนำ
การสนับสนุนโดยตรงเกิดขึ้นเมื่อแหล่งข้อมูลสนับสนุนข้อกล่าวอ้างเชิงประเมินตามถ้อยคำที่ใช้ กรณีนี้อาจเกิดเมื่อคำตอบระบุแหล่งที่มาของรางวัล การจัดอันดับ หรือบทประเมินที่เผยแพร่ไว้อย่างเฉพาะเจาะจงและถูกต้อง โดยเชื่อมโยงไปยังหน้าที่มีข้อมูลนั้น แม้กระนั้น ถ้อยคำก็ยังสำคัญ แหล่งข้อมูลที่เรียกสถานที่หนึ่งว่า “ตัวเลือกของบรรณาธิการสำหรับการรับประทานอาหารริมน้ำ” ไม่ได้สนับสนุนโดยตรงต่อข้อกล่าวอ้างที่กว้างกว่าว่าเป็นร้านอาหารที่ดีที่สุดของเมือง
การสนับสนุนเกินขอบเขตพบได้บ่อยในคำแนะนำที่ระบบสร้าง แหล่งข้อมูลอาจมีความคิดเห็นเชิงบวกจากลูกค้า แต่คำตอบเปลี่ยนความคิดเห็นเหล่านั้นให้เป็นข้อกล่าวอ้างเรื่องชื่อเสียงที่มั่นคง สถานที่ซึ่งเว็บไซต์ของตนเองบรรยายว่า “เหมาะสำหรับครอบครัว” กลายเป็น “ร้านโปรดของครอบครัวท้องถิ่น” รายการข้อมูลที่มีคะแนนสูงบนแพลตฟอร์มกลายเป็น “ได้รับความไว้วางใจอย่างกว้างขวาง” แม้ว่าคำตอบจะไม่ระบุแพลตฟอร์ม ช่วงเวลาของรีวิว หรือเกณฑ์ที่ใช้เปรียบเทียบ
การยืมตัวตนเกิดขึ้นเมื่อคำชมเกี่ยวกับอีกเอนทิตีหนึ่งเข้ามาอยู่ในคำแนะนำ ในสถานการณ์สังเคราะห์ ความคิดเห็นเชิงบวกบนหน้าของร้านอาหารต่างจังหวัดซึ่งมีชื่อคล้ายกัน ดูเข้ากันได้กับคำบรรยายที่ระบบสร้างให้สาขากรุงเทพฯ แต่บรรยากาศ การบริการ และทิวทัศน์ริมน้ำในหน้านั้นเป็นของอีกสถานที่หนึ่ง
การปรากฏโดยไม่มีหลักฐานรองรับเป็นประเภทที่ใช้เมื่อไม่มีแหล่งข้อมูลที่มองเห็นได้ในข้อสังเกตซึ่งเก็บรักษาไว้รองรับข้อกล่าวอ้างนั้น “ตัวเลือกที่ปลอดภัยสำหรับนักเดินทางผู้พิถีพิถัน” อยู่ในประเภทนี้ เช่นเดียวกับข้อความว่าร้านอาหาร “ขึ้นชื่อเรื่องมาตรฐานที่สม่ำเสมอในทุกสาขา” ข้อความเหล่านี้อาจสะท้อนข้อมูลที่ไม่เปิดเผย การอนุมานของโมเดล หรือภาษาคำแนะนำทั่วไป ข้อสังเกตแสดงได้เพียงว่าไม่มีหลักฐานรองรับที่มองเห็นได้
เส้นแบ่งระหว่างการสนับสนุนเกินขอบเขตกับการปรากฏโดยไม่มีหลักฐานรองรับอาจทำให้ตัดสินได้ยาก หากแหล่งข้อมูลมีรีวิวเชิงบวกหนึ่งข้อความ สิ่งนั้นสนับสนุนคำว่า “ยอดเยี่ยมอย่างสม่ำเสมอ” บางส่วนหรือไม่ โดยทั่วไป ห้องปฏิบัติการจัดความสัมพันธ์เป็นการสนับสนุนเกินขอบเขตเมื่อยังมีฐานที่แคบกว่าและมองเห็นความเชื่อมโยงได้ ความสม่ำเสมอยังคงไม่มีหลักฐานรองรับในฐานะข้อกล่าวอ้างตามช่วงเวลา แต่คำประเมินเชิงบวกไม่ได้ปรากฏขึ้นจากความว่างเปล่า การจำแนกจึงบันทึกการขยายเกินหลักฐาน
นี่ไม่ใช่การคำนวณเชิงตัวเลข ทีมงานไม่ได้นับการอ้างอิงแล้วคำนวณคะแนนความเชื่อมั่น แหล่งข้อมูลโดยตรงเพียงแหล่งเดียวอาจรองรับข้อความที่แม่นยำได้ดีกว่าหลายหน้าซึ่งเกี่ยวข้องเพียงกว้าง ๆ คำถามยังคงเป็นคำถามเฉพาะจุดว่า แหล่งข้อมูลนี้ยืนยันอะไรเกี่ยวกับข้อกล่าวอ้างข้อนี้
ภาษาคำแนะนำทั่วไปเข้ามาในคำตอบได้อย่างไร
วลีแนะนำบางแบบดูเหมือนเขียนมาเฉพาะกรณี ทั้งที่มีข้อมูลเฉพาะเอนทิตีน้อยมาก เช่น “เป็นตัวเลือกที่ดี” “ควรค่าแก่การพิจารณา” “ขึ้นชื่อเรื่องคุณภาพ” และ “เหมาะสำหรับผู้มาเยือนที่ต้องการประสบการณ์แบบแท้จริง” วลีเหล่านี้ใช้ได้กับกิจการนับพันแห่ง ความลื่นไหลของภาษาช่วยปิดบังว่าวลีเหล่านี้สามารถสับเปลี่ยนกันได้ง่ายเพียงใด
ในการรันที่ทำซ้ำได้ซึ่งห้องปฏิบัติการเก็บรักษาไว้ วลีเช่นนี้ไปเกาะกับเอนทิตีหลายแห่ง แม้ว่าแหล่งข้อมูลที่มองเห็นได้จะมีเพียงข้อเท็จจริงด้านการดำเนินงานเป็นหลัก ถ้อยคำเปลี่ยนไป แต่หน้าที่ยังคงเดิม คือปิดช่องว่างระหว่างการระบุกิจการกับการรับรองกิจการนั้น
ช่องว่างนี้สำคัญ เพราะผู้ใช้แทบไม่เคยถามเพียงรายชื่อสถานที่ที่มีอยู่ พวกเขาถามว่าควรไปที่ไหน ควรเลือกผู้ให้บริการรายใด หรือสิ่งใดเหมาะที่สุดกับความต้องการเฉพาะ ระบบที่ตอบเพียงที่อยู่และหมวดหมู่จะดูไม่สมบูรณ์ คำตอบที่ระบบสร้างจึงมีแรงผลักให้ต้องประเมิน แม้ว่าหลักฐานที่มองเห็นได้จะเหมาะกับการระบุตัวตนมากกว่าการตัดสินคุณค่า
สถานการณ์ร้านอาหารสังเคราะห์แสดงการขยายที่มองเห็นได้สามรูปแบบ รูปแบบแรกคือการขยายคำบรรยายตนเอง “พื้นที่ที่เป็นมิตร” กลายเป็น “ขึ้นชื่อเรื่องการต้อนรับอันอบอุ่น” รูปแบบที่สองคือการสรุปรวมจากข้อมูลบนแพลตฟอร์ม ความคิดเห็นเชิงบวกชุดหนึ่งกลายเป็น “ได้รับคำชมอย่างสม่ำเสมอ” รูปแบบที่สามคือการใช้ภาษาคำแนะนำโดยไม่มีฐานข้อมูลท้องถิ่นที่มองเห็นได้ เช่น “ตัวเลือกที่ยอดเยี่ยมสำหรับผู้มาเยือนครั้งแรก”
ห้องปฏิบัติการไม่สามารถยืนยันได้ว่ารูปแบบเหล่านี้ตรงกับช่วงการทำงานภายในของระบบ สิ่งเหล่านี้เป็นเพียงคำบรรยายความสัมพันธ์ระหว่างผลลัพธ์กับบันทึก วลีเดียวกันอาจได้รับอิทธิพลจากหน้าที่ไม่เปิดเผย ความเชื่อมโยงกว้าง ๆ ที่โมเดลเรียนรู้มา หรือธรรมเนียมการใช้ถ้อยคำในคำแนะนำที่ระบบสร้าง
ถึงอย่างนั้น ลักษณะกว้าง ๆ ของภาษาก็เป็นเครื่องมือวินิจฉัยที่มีประโยชน์ เมื่อวลีเชิงประเมินยังฟังเข้ากันได้พอ ๆ กันหลังเปลี่ยนชื่อกิจการ วลีนั้นควรได้รับการตรวจสอบใกล้ชิดขึ้น สิ่งนี้ไม่ได้พิสูจน์ว่าข้อกล่าวอ้างเป็นเท็จ แต่บ่งชี้ว่าถ้อยคำอาจกำลังทำงานโน้มน้าวมากกว่าที่หลักฐานที่มองเห็นได้จะรองรับ
ความซับซ้อนอีกอย่างคือการระบุแหล่งที่มาของความเห็น ประโยคว่า “ผู้รีวิวชื่นชมการบริการ” สามารถตรวจสอบกับรีวิวได้ ส่วน “การบริการเอาใจใส่” ตัดการระบุแหล่งที่มาออก และนำเสนอคำประเมินในฐานะคำบรรยายที่คำตอบยืนยันเอง การเปลี่ยนไวยากรณ์เพียงเล็กน้อยนี้ทำให้ความสัมพันธ์ระหว่างข้อกล่าวอ้างกับแหล่งข้อมูลเปลี่ยนไป หลักฐานไม่ได้ดีขึ้น เพียงแต่ความไม่แน่นอนถูกลบออกจากถ้อยคำ
คำตอบแบบเปรียบเทียบสร้างข้อกล่าวอ้างเรื่องอันดับที่ซ่อนอยู่
คำแนะนำต้องใช้หลักฐานมากขึ้นเมื่อมีการเปรียบเทียบหลายกิจการ การเลือกสถานที่หนึ่งเป็น “ดีที่สุดสำหรับครอบครัว” แฝงความสัมพันธ์ระหว่างทางเลือกต่าง ๆ แม้ว่าคำตอบจะไม่เคยระบุวิธีการเปรียบเทียบก็ตาม
ในชุดพรอมป์ที่ออกแบบให้เปรียบเทียบกันได้โดยใช้สถานการณ์ร้านอาหารสังเคราะห์ ห้องปฏิบัติการขอให้ระบบหาร้านที่เหมาะกับมื้ออาหารครอบครัว มื้อค่ำธุรกิจที่เงียบสงบ และการแวะช่วงสั้น ๆ ใกล้จุดเชื่อมต่อระบบขนส่ง ร้านเดียวกันปรากฏในทั้งสามรูปแบบ แหล่งข้อมูลที่ใช้รองรับยืนยันว่าร้านมีเมนูหลากหลาย รับจอง และตั้งอยู่ในทำเลสะดวก แต่ไม่ได้ยืนยันความเงียบ ความเหมาะสมสำหรับเด็ก หรือความเหนือกว่าทางเลือกใกล้เคียง
การถูกเลือกซ้ำอาจบ่งชี้ถึงข้อได้เปรียบที่มั่นคง แต่ก็อาจสะท้อนว่าร้านนั้นถูกดึงขึ้นมาได้ง่ายกว่า สถานที่ดังกล่าวมีหน้าเว็บภาษาอังกฤษมากกว่า ใช้ชื่อสาขาสม่ำเสมอกว่า และมีข้อมูลบนแพลตฟอร์มมากกว่าทางเลือกหลายแห่งในบันทึกสังเคราะห์ เงื่อนไขเหล่านี้ทำให้ระบบประกอบข้อมูลของกิจการนั้นเป็นคำตอบได้ง่ายขึ้น แต่ความง่ายในการดึงข้อมูลไม่ใช่สิ่งเดียวกับความเหมาะสม
ข้อกล่าวอ้างเชิงเปรียบเทียบต้องมีหลักฐานเกี่ยวกับทางเลือกอื่น เพราะคำว่า “ดีที่สุด” บรรยายความสัมพันธ์ ไม่ใช่คุณสมบัติของสิ่งหนึ่งโดยลำพัง เมื่อไม่มีฐานเปรียบเทียบที่มองเห็นได้ คำตอบอาจกำลังรายงานความโดดเด่นในสภาพแวดล้อมการดึงข้อมูล แต่ใช้ถ้อยคำราวกับเป็นการประเมินคุณภาพกิจการ
ประเด็นนี้เกี่ยวข้องเป็นพิเศษกับองค์กรไทยซึ่งข้อมูลสาธารณะกระจายตัวไม่สม่ำเสมอระหว่างภาษา สถานที่ที่มีคำบรรยายภาษาอังกฤษกระชับอาจดูน่าแนะนำกว่าในพรอมป์ภาษาอังกฤษ เพราะระบบสามารถอธิบายได้โดยมีจุดที่ยังคลุมเครือน้อยกว่า อีกกิจการหนึ่งอาจเหมาะกับความต้องการของผู้ใช้มากกว่า แต่มีข้อมูลบางกว่า กระจัดกระจายกว่า หรือมีเฉพาะภาษาไทย
ห้องปฏิบัติการพิจารณาคำอธิบายนี้อย่างระมัดระวัง บันทึกสามารถแสดงว่าแหล่งข้อมูลใดมองเห็นได้และเอนทิตีใดปรากฏกลับมา แต่ไม่สามารถยืนยันได้ว่าข้อมูลภาษาอังกฤษที่สมบูรณ์กว่าคือสาเหตุของคำแนะนำ รูปแบบที่พบสอดคล้องกับการตีความนั้น และการรันซ้ำสามารถทดสอบได้ว่ารูปแบบดังกล่าวกลับมาหรือไม่เมื่อใช้พรอมป์ภาษาไทย ใส่ชื่อในเครื่องหมายอัญประกาศ จำกัดพื้นที่ให้แคบลง หรือเปลี่ยนถ้อยคำเชิงเปรียบเทียบ
เมื่อเอนทิตีเดิมยังได้รับเลือกแม้ว่าความต้องการของผู้ใช้เปลี่ยนไป ทีมงานจะตรวจว่าคำแนะนำนั้นเปลี่ยนตามเงื่อนไขจริงหรือไม่ บางครั้งคำตอบเปลี่ยนเพียงคำคุณศัพท์ท้ายประโยค กิจการยังคงเดิม แต่คำว่า “เหมาะสำหรับครอบครัว” กลายเป็น “สะดวกสำหรับมืออาชีพ” แล้วเปลี่ยนเป็น “เข้าถึงง่ายสำหรับผู้มาเยือน” นี่เป็นสัญญาณเตือนว่าร้านอาจถูกเลือกก่อน แล้วจึงมีการแต่งถ้อยคำเรื่องความเหมาะสมตามหลัง แต่ไม่ได้ยืนยันลำดับการทำงานภายในระบบ
สิ่งที่ผู้อ่านตรวจสอบได้ในบันทึกคำแนะนำ
การตรวจสอบที่มีประโยชน์เริ่มจากการเก็บรักษาคำตอบเป็นข้อสังเกต ได้แก่ พรอมป์ ถ้อยคำที่ระบบสร้าง การอ้างอิงที่มองเห็นได้ ภาษา บริบทของโมเดล วันที่สังเกต และเงื่อนไขการรัน ภาพหน้าจออาจสำคัญ เพราะตำแหน่งการอ้างอิงและข้อความตัวอย่างที่แสดงอาจเปลี่ยนแปลงได้
จากนั้นควรแบ่งคำแนะนำออกเป็นข้อกล่าวอ้างด้านตัวตน การดำเนินงาน คำบรรยาย การประเมิน และการเปรียบเทียบ คำเรียกเหล่านี้ใช้เพื่อการวิเคราะห์ ไม่ใช่ศัพท์บัญญัติของห้องปฏิบัติการ จุดประสงค์คือป้องกันไม่ให้ข้อเท็จจริงหนึ่งข้อที่มีหลักฐานดีช่วยกำบังคำตัดสินอีกหลายข้อซึ่งไม่มีหลักฐานรองรับ
สำหรับแต่ละข้อกล่าวอ้าง ผู้อ่านสามารถถามว่าแหล่งข้อมูลกล่าวถึงเอนทิตีใด แหล่งข้อมูลระบุข้อความนั้นจริงหรือไม่ และคำตอบขยายขอบเขตออกไปหรือเปล่า ที่อยู่บนหน้าแผนที่อาจเป็นการสนับสนุนโดยตรง หมวดหมู่บนแพลตฟอร์มอาจเป็นการสนับสนุนเกินขอบเขตสำหรับป้ายประเภทธุรกิจที่กว้างกว่า คำชมจากอีกสาขาอาจกลายเป็นการยืมตัวตน ส่วนถ้อยคำแบบ “ดีที่สุด” ที่ไม่มีฐานให้เห็นจะเป็นการปรากฏโดยไม่มีหลักฐานรองรับ
กระบวนการนี้ไม่จำเป็นต้องเริ่มจากท่าทีเป็นปฏิปักษ์ต่อระบบแนะนำ แต่ต้องต้านทางลัดทางสายตาที่พบบ่อย คือเมื่อมีการอ้างอิงก็ถือว่าทั้งประโยคมีหลักฐานรองรับ การอ้างอิงต้องประเมินเป็นรายข้อกล่าวอ้าง เพราะข้อความที่อยู่ติดกันอาจต่างกันทั้งในด้านเอนทิตี ขอบเขต และสถานะของหลักฐาน
ผลเชิงปฏิบัติจึงเฉพาะเจาะจงกว่าคำว่า “ตรวจสอบแหล่งข้อมูล” กิจการอาจได้รับการระบุเอนทิตีอย่างถูกต้อง แต่ยังถูกแนะนำด้วยเหตุผลที่แต่งขึ้น หรืออาจถูกแนะนำจากคุณลักษณะที่มีอยู่จริงแต่ยืมมาจากอีกสาขาหรืออีกองค์กรหนึ่ง การมองเห็น ความถูกต้องของการระบุเอนทิตี และหลักฐานรองรับคำแนะนำ จำเป็นต้องได้รับการตรวจแยกจากกัน
ข้อจำกัดของบันทึกที่มองเห็นได้
วิธีการนี้ไม่สามารถเปิดเผยแหล่งข้อมูลทุกแห่งที่โมเดลใช้ภายใน ข้อกล่าวอ้างซึ่งถูกจัดเป็นการปรากฏโดยไม่มีหลักฐานรองรับ หมายความว่าไม่มีแหล่งข้อมูลที่มองเห็นได้ในข้อสังเกตซึ่งเก็บรักษาไว้รองรับข้อความนั้น ไม่ได้พิสูจน์ว่าไม่มีข้อมูลสนับสนุนอยู่ที่ใดเลย
ห้องปฏิบัติการยังไม่สามารถอนุมานคุณภาพของคำแนะนำจากการสนับสนุนของแหล่งข้อมูลเพียงอย่างเดียว ข้อกล่าวอ้างที่ได้รับการสนับสนุนโดยตรงอาจอาศัยแหล่งข้อมูลที่อ่อนหรือมีส่วนได้เสีย ข้อกล่าวอ้างที่ไม่มีหลักฐานรองรับอาจบังเอิญเป็นจริง การจำแนกนี้บรรยายความสัมพันธ์ระหว่างข้อกล่าวอ้างกับแหล่งข้อมูลที่มองเห็นได้ ไม่ใช่ความจริงของข้อกล่าวอ้างในที่สุดหรือประโยชน์ของคำแนะนำ
การรันซ้ำเพิ่มข้อมูลเรื่องรูปแบบ แต่ไม่ได้ลบขอบเขตนี้ หากหลายโมเดลเรียกร้านเดียวกันว่า “ได้รับการยอมรับสูง” ความสอดคล้องนั้นเป็นข้อสังเกต ระบบต่าง ๆ อาจอาศัยข้อมูลสาธารณะที่คล้ายกัน สมมติฐานเรื่องหมวดหมู่ร่วมกัน หรือรูปแบบภาษาทั่วไปที่คล้ายกัน ความสอดคล้องกันเพียงอย่างเดียวไม่ได้ยืนยันข้อกล่าวอ้างเรื่องชื่อเสียง
สถานการณ์สังเคราะห์ยังไม่สามารถยืนยันได้ว่าเหตุใดร้านอาหารนี้จึงถูกเลือกเหนือคู่แข่ง บันทึกที่มองเห็นได้เปิดให้มีคำอธิบายหลายแบบ เช่น ปริมาณแหล่งข้อมูล ความสม่ำเสมอของชื่อ ความเหมาะสมด้านที่ตั้ง ความโดดเด่นบนแพลตฟอร์ม หรือสัญญาณเปรียบเทียบที่ไม่เปิดเผย ห้องปฏิบัติการสามารถปรับพรอมป์และตรวจสิ่งที่เปลี่ยนไปได้ แต่ตรรกะการจัดอันดับและการดึงข้อมูลภายในที่ไม่เปิดเผยยังไม่สามารถเข้าถึงได้
ข้อสรุปที่หลักฐานรองรับได้จึงมีขอบเขตแคบกว่า การอ้างอิงข้อเท็จจริงในคำตอบไม่ได้รองรับภาษาเชิงประเมินและเชิงเปรียบเทียบทั้งหมด คำชมบางส่วนขยายเกินหลักฐานที่แคบกว่า บางส่วนเป็นของอีกเอนทิตีหนึ่ง และบางส่วนปรากฏขึ้นโดยไม่มีหลักฐานรองรับที่มองเห็นได้ คำแนะนำดูสมบูรณ์เพราะความสัมพันธ์เหล่านี้ถูกบีบรวมไว้ในย่อหน้าที่อ่านลื่นเพียงย่อหน้าเดียว
การบีบรวมนี้เองคือสิ่งที่ควรศึกษา เพราะตรงนั้นคือจุดที่รายการข้อเท็จจริงซึ่งมีหลักฐานรองรับเพียงบางส่วนกลายเป็นคำแนะนำ