เตรียมสอบ CCAO-F อ่านโจทย์และลงมือ
เครื่องมือตัดสินใจที่ใช้ข้ามโดเมน
สี่คำถามที่ตอบได้แล้วใช้ได้กับหลายโดเมนพร้อมกัน ทุกข้อมีที่มาจากคู่มือ ไม่ใช่เทคนิคที่คิดขึ้นเอง
· หมวด 3 · อ่านโจทย์และลงมือ · 3 นาที
โดเมนทั้งเจ็ดไม่ได้แยกจากกันจริง โจทย์หนึ่งข้ออาจแตะสองสามโดเมน บทนี้รวบเกณฑ์ ที่คู่มือให้ไว้กระจัดกระจาย มาเป็นคำถามที่ถามตัวเองได้
ทุกเกณฑ์ในบทนี้มาจากคู่มือ ไม่ใช่เทคนิคทำข้อสอบที่คิดขึ้นเอง
หนึ่ง — งานนี้เกินขอบเขตของ Associate หรือยัง
คู่มือหัวข้อ 1 ระบุหน้าที่นี้ไว้เป็นส่วนหนึ่งของบทบาท
"recognizing limitations and escalating more complex or technical work to Claude Architects and Developers"
และหัวข้อ 3 บอกเส้นแบ่งไว้
in scope งานผลิตภาพ ออกแบบกระบวนการ ระบุ use case
out of scope เขียนโค้ดกับ API ออกแบบระบบเอเจนต์
สถาปัตยกรรม AI ระดับองค์กรถ้าโจทย์พาไปถึงฝั่งขวา คำตอบที่ถูกมักคือส่งต่อ ไม่ใช่ลองทำเอง
สอง — ผลลัพธ์นี้ต้องมีคนตรวจไหม
โดเมน 2 มีวัตถุประสงค์ตรง ๆ ว่า
"Determine when human review or additional verification is required"
เฉลยตัวอย่างข้อ 1 ให้เกณฑ์ที่ใช้ได้จริงสองอย่าง
specific claim เลขมาตรา ตัวเลข วันที่ ชื่อเฉพาะ
costly recipient compliance กฎหมาย การเงิน ลูกค้าคู่มือเน้นคำว่า "especially citations bound for a compliance audience"
และย้ำว่าความมั่นใจของโมเดลไม่ใช่เกณฑ์ ตัวเลือกที่ให้โมเดลประเมินตัวเอง ผิดเสมอในรูปแบบนี้
สาม — ข้อมูลชุดนี้เอาเข้าได้ไหม
โดเมน 6 ให้ลำดับที่ชัดจากเฉลยตัวอย่างข้อ 3
1 policy stated? ถ้ามี นโยบายนั้นคือกติกา
2 identifiers? ถ้ามี ลบหรือทำให้ไม่ระบุตัวตนก่อน
3 still works? ถ้าได้ ให้ทำ ไม่ใช่ยกเลิกขั้นที่สามสำคัญที่สุด เพราะคู่มือทำเครื่องหมายว่าการยกเลิกงานทั้งที่ทำให้ไม่ ระบุตัวตนแล้วทำได้ เป็นตัวเลือก "unnecessary"
สี่ — เลือกโมเดลจากอะไร
โดเมน 3 ให้สามแกน และเฉลยตัวอย่างข้อ 2 ให้กฎที่ใช้ได้
high volume, simple โมเดลเร็วกว่า ถูกกว่า
complex reasoning โมเดลที่เก่งที่สุดคู่มือใช้คำว่า "reserving the most capable model for complex reasoning"
คำว่า reserving แปลว่าเก็บไว้ใช้เมื่อจำเป็น ไม่ใช่ใช้เป็นค่าเริ่มต้น
สี่คำถามนี้ตอบโจทย์ได้กี่โดเมน
1 escalate? โดเมน 4 และ 6
2 human review? โดเมน 2 และ 7
3 data allowed? โดเมน 5 และ 6
4 which model? โดเมน 3 และ 7รวมกันแตะทั้งเจ็ดโดเมนยกเว้นโดเมน 1 ซึ่งเป็นโดเมนที่วัดการลงมือเขียนพรอมต์ มากกว่าการตัดสินใจ
สิ่งที่ยังไม่ได้พิสูจน์
สี่คำถามนี้ไม่ได้มาจากคู่มือในรูปนี้ แต่ละเกณฑ์มาจากคู่มือจริง แต่การรวบเป็น สี่คำถามเป็นการจัดของผมเอง คู่มือไม่ได้เสนอลำดับการตัดสินใจไว้แบบนี้
และมันไม่ครอบคลุมทุกโจทย์ โจทย์ที่วัดความรู้เรื่องฟีเจอร์ตรง ๆ เช่น ความต่าง ระหว่าง artifacts กับ inline ไม่มีคำถามไหนในสี่ข้อนี้ช่วยได้
อ้างอิง
เอกสารทางการ
- คู่มือสอบ CCAO-F หัวข้อ 1 การส่งต่องาน · หัวข้อ 3 ขอบเขต · หัวข้อ 6 วัตถุประสงค์ · หัวข้อ 8 เฉลย
คำนวณเอง
- การรวบเกณฑ์เป็นสี่คำถาม และตารางว่าคำถามไหนแตะโดเมนไหน เป็นการจัดของบทนี้เอง ไม่ใช่โครงที่คู่มือให้