การกำหนดเส้นทาง
การสำรองระหว่างโมเดลคืออะไร?
การสำรองคือสิ่งที่เกิดขึ้นเมื่อโมเดลแรกล้มเหลว — ล่ม ถูกจำกัด หรือปฏิเสธ สายการสำรองทำงานอย่างไร และทำไมการสำรองแบบเงียบจึงอันตราย
บทความทั้งหมด · ตรวจสอบล่าสุด:
ทำไมมันไม่ใช่ทางเลือก
งานที่มีผู้ให้บริการเดียวสืบทอดความพร้อมใช้งานของผู้ให้บริการนั้นตรงตัว โดยเฉพาะขีดจำกัดอัตราไม่ใช่เหตุการณ์ที่เกิดขึ้นน้อย มันคือผลปกติของชั่วโมงที่คนใช้งานเยอะ และงานที่ไม่มีการสำรองก็หยุดทำงานเฉยๆ
การสำรองเปลี่ยนความล้มเหลวที่หนักหน่วงให้กลายเป็นคำตอบที่ด้อยลง สิ่งนี้จะดีขึ้นหรือไม่ขึ้นอยู่กับว่าคุณถูกบอกให้รู้หรือเปล่าว่ามันเกิดขึ้น
การเลือกลำดับ
ลำดับที่คิดง่ายๆ คือ «โมเดลที่ดีรองลงมา» แต่มักผิด หากตัวเลือกแรกล้มเหลวเพราะคำขอยาวเกินไป โมเดลที่เล็กกว่าก็จะล้มเหลวเช่นกัน หากมันปฏิเสธด้วยเหตุผลด้านเนื้อหา โมเดลที่คล้ายกันก็จะปฏิเสธในลักษณะเดียวกัน
ลำดับที่มีประโยชน์กว่าเปลี่ยนบางอย่างในเชิงโครงสร้าง: ผู้ให้บริการที่แตกต่างไปเลย หรือโมเดลโลคัลที่มีกฎต่างออกไป แทนที่จะเป็นตัวที่คล้ายกันซึ่งจะล้มเหลวแบบเดียวกัน
ประเภทที่อันตราย
การสำรองแบบเงียบคือระบบที่ตอบด้วยโมเดลอื่นอย่างเงียบๆ และไม่บอกอะไรเลย คุณได้คำตอบที่แย่กว่า ซึ่งคุณคิดในใจว่ามาจากโมเดลที่คุณเลือก แล้วสรุปผิดๆ เกี่ยวกับโมเดลนั้น
เมื่อการสำรองข้ามเส้นแบ่งความเป็นส่วนตัว มันแย่กว่าการสรุปผิด การเปลี่ยนจากโมเดลโลคัลไปยังผู้ให้บริการคลาวด์ส่งข้อมูลไปยังที่ที่ผู้ใช้ตั้งใจไม่ให้ไปพอดี สายที่สามารถออกจากการทำงานโลคัลควรเป็นสายที่ผู้ใช้ยอมรับอย่างชัดเจน
ClawAI ทำสิ่งนี้อย่างไร
โหมดการกำหนดเส้นทางกำหนดสายของตัวเอง และโหมดโลคัลเท่านั้นเก็บสายของมันไว้บนผู้ให้บริการโลคัลแทนที่จะหาโมเดลคลาวด์เมื่อโลคัลไม่ว่าง ทุกข้อความบันทึกโมเดลที่ตอบจริงๆ ดังนั้นการสำรองจึงมองเห็นได้ภายหลัง แทนที่จะต้องเดาจากการเปลี่ยนน้ำเสียง
คำถามที่พบบ่อย
- การสำรองเหมือนกับการลองใหม่ไหม?
- การลองใหม่ส่งคำขอเดิมไปยังโมเดลเดิม ซึ่งช่วยได้กับข้อผิดพลาดชั่วคราว การสำรองเปลี่ยนโมเดล ซึ่งช่วยเมื่อตัวแรกให้บริการคำขอไม่ได้เลย ระบบที่แข็งแกร่งทำทั้งสองอย่าง ตามลำดับนี้
- การสำรองควรเปลี่ยนจากโลคัลไปคลาวด์เมื่อไรไหม?
- เฉพาะเมื่อผู้ใช้ร้องขอเท่านั้น การทำงานโลคัลมักถูกเลือกด้วยเหตุผลที่การสำรองเคารพไม่ได้ ดังนั้นทางที่ปลอดภัยคือล้มเหลวแล้วบอกให้รู้ แทนที่จะสำเร็จในที่อื่น
- สายควรมีกี่โมเดล?
- สองหรือสามโดยปกติก็เพียงพอ สายยาวส่วนใหญ่เพิ่มความหน่วง เพราะทุกความพยายามที่ล้มเหลวถูกจ่ายด้วยเวลาก่อนที่ตัวถัดไปจะเริ่ม
ลองใช้ดีกว่าอ่านเฉยๆ
โหมดการกำหนดเส้นทางของ ClawAI มีสายการสำรองของตัวเอง และโลคัลเท่านั้นเก็บสายของมันไว้โลคัลแทนที่จะไปถึงผู้ให้บริการคลาวด์อย่างเงียบๆ