NetKubeLab EN

เตรียมสอบ CCAO-F เจ็ดโดเมนตาม blueprint

โดเมน 7 · Troubleshooting and Optimization

สิบเปอร์เซ็นต์ เบาที่สุดในเจ็ดโดเมน แต่มีวัตถุประสงค์ที่คาบเกี่ยวกับโดเมนอื่นมากที่สุด

· หมวด 2 · เจ็ดโดเมนตาม blueprint · 2 นาที

น้ำหนัก 10% ของข้อสอบ เบาที่สุดในเจ็ดโดเมน

แต่เบาไม่ได้แปลว่าง่าย โดเมนนี้มีวัตถุประสงค์แค่สามข้อ และทั้งสามข้อคาบเกี่ยวกับ โดเมนอื่น ซึ่งทำให้แยกยากว่าโจทย์กำลังวัดอันไหน

วัตถุประสงค์ตามคู่มือ

"Identify, diagnose, and resolve issues with underperforming prompts or poor outputs"

"Adjust approach based on feedback and results"

"Optimize workflows for efficiency and effectiveness"

สามคำกริยาในข้อแรกคือสามขั้น

  identify   รู้ว่ามีปัญหา
  diagnose   รู้ว่าปัญหาอยู่ตรงไหน
  resolve    แก้

ขั้นที่คนข้ามคือขั้นกลาง คนส่วนใหญ่เห็นผลลัพธ์ไม่ดีแล้วกระโดดไปแก้พรอมต์ทันที ทั้งที่สาเหตุอาจอยู่ที่คลังความรู้ที่ล้าสมัย (โดเมน 5) หรือเลือกโมเดลไม่เหมาะ กับงาน (โดเมน 3)

โจทย์ในโดเมนนี้จึงมักให้อาการมา แล้วถามว่า ควรตรวจอะไรก่อน ไม่ได้ถามว่าแก้ อย่างไร

แยกจากโดเมน 1 ยังไง

ทั้งสองโดเมนพูดถึงพรอมต์ที่ให้ผลไม่ดี ความต่างอยู่ที่จุดตั้งต้น

  domain 1  iterate    เริ่มจาก "อยากได้ดีกว่านี้"
  domain 7  diagnose   เริ่มจาก "ผลออกมาผิด ทำไม"

คำใบ้ในโจทย์คือมีอาการเสียหรือไม่ ถ้าโจทย์บอกว่าผลลัพธ์ผิด ไม่ครบ หรือไม่ สม่ำเสมอ นั่นคือโดเมน 7 ถ้าโจทย์บอกว่าผลใช้ได้แต่อยากให้ดีขึ้น นั่นคือโดเมน 1

optimize มีสองเกณฑ์ ไม่ใช่เกณฑ์เดียว

ข้อสามใช้คำคู่กันว่า efficiency and effectiveness ซึ่งไม่ใช่คำเดียวกัน

  efficiency     ใช้ทรัพยากรน้อยลง เร็วขึ้น ถูกลง
  effectiveness  ได้ผลลัพธ์ที่ต้องการมากขึ้น

สองอย่างนี้แลกกันได้ ทำให้เร็วขึ้นแล้วคุณภาพตกคือเพิ่ม efficiency แต่ลด effectiveness ซึ่งเป็นเรื่องเดียวกับสามแกนในโดเมน 3

โจทย์ที่ถามเรื่องการปรับปรุง มักมีตัวเลือกที่ดีขึ้นด้านหนึ่งแต่แย่ลงอีกด้าน และคำตอบขึ้นกับว่าสถานการณ์บอกว่าอะไรสำคัญกว่า

เมื่อมันโกหก

"ผลลัพธ์ไม่ดี แปลว่าพรอมต์ไม่ดี" วัตถุประสงค์แยกคำว่า diagnose ออกมาเป็น ขั้นของตัวเอง เพราะสาเหตุอาจไม่ได้อยู่ที่พรอมต์

"โดเมนนี้เบาที่สุด ข้ามได้" 10% ของ 60 ข้อยังเป็นสัดส่วนที่มีผลต่อคะแนนรวม และโจทย์ของมันคาบเกี่ยวกับโดเมนอื่น การอ่านมันช่วยแยกโจทย์โดเมนอื่นด้วย

"optimize คือทำให้เร็วขึ้นและถูกลง" คู่มือใส่คำว่า effectiveness ไว้ด้วย การเร็วขึ้นโดยผลลัพธ์แย่ลงไม่ใช่การ optimize ตามนิยามนี้

อ้างอิง

เอกสารทางการ

อ่านต่อในคอร์สนี้

วัดการตัดสินใจ

อ่านหน้านี้เป็นภาษาอังกฤษ