NetKubeLab EN

เตรียมสอบ CCAO-F เจ็ดโดเมนตาม blueprint

โดเมน 3 · Product and Model Selection

สิบสองเปอร์เซ็นต์ เป็นโดเมนที่มีชื่อฟีเจอร์และชื่อโมเดลให้จำมากที่สุด และตัวอย่างข้อสอบทางการข้อที่สองก็อยู่ที่นี่

· หมวด 2 · เจ็ดโดเมนตาม blueprint · 3 นาที

น้ำหนัก 12% ของข้อสอบ

โดเมนนี้ต่างจากเพื่อนบ้าน เพราะมีของที่ต้อง จำ จริง ๆ อยู่บ้าง คือชื่อฟีเจอร์ และชื่อระดับโมเดล ส่วนที่เหลือยังเป็นการตัดสินใจเหมือนเดิม

วัตถุประสงค์ตามคู่มือ

"Select appropriate Claude product features (Projects, research mode, chat, artifacts)"

"Differentiate between Claude model types (Haiku, Sonnet, Opus)"

"Align model selection with task requirements (cost, speed, quality)"

"Understand and manage context limitations and memory considerations (when to restart, summarize, or persist)"

สามแกนที่ใช้ตัดสิน

วัตถุประสงค์ข้อสามระบุแกนไว้เองสามแกน

  cost     ราคาต่อการเรียกใช้
  speed    เวลาที่รอผลลัพธ์
  quality  ความลึกของการให้เหตุผล

สามแกนนี้ขัดกันเอง และข้อสอบวัดว่าเลือกจุดสมดุลเป็นไหม ไม่ได้วัดว่าจำได้ไหม ว่าโมเดลไหนใหญ่กว่ากัน

ตัวอย่างข้อสอบทางการข้อที่สอง

คู่มือหัวข้อ 8 ยกสถานการณ์ว่าต้องสร้างร่างตอบลูกค้าสั้น ๆ จำนวนมาก โดยความเร็ว และต้นทุนสำคัญกว่าการให้เหตุผลเชิงลึก แล้วถามว่าเลือกอะไร

เฉลยคือ ใช้โมเดลที่เร็วกว่าและถูกกว่า ซึ่งเหมาะกับงานตรงไปตรงมาที่มีปริมาณมาก และเหตุผลที่คู่มือให้คือ

"Aligning model selection with task requirements means matching a faster, lower-cost model to straightforward, high-volume work, reserving the most capable model for complex reasoning. Always using the top model (A) wastes the cost and latency budget"

ประโยค "always using the top model wastes the cost and latency budget" คือ กับดักหลักของโดเมนนี้ ตัวเลือกที่บอกให้ใช้โมเดลเก่งที่สุดเสมอ เป็นตัวเลือกผิด ไม่ใช่ตัวเลือกปลอดภัย

และสังเกตตัวเลือกอีกสองข้อที่คู่มืออธิบายว่าทำไมผิด

"disabling features (C) or switching platforms (D) does not address the trade-off"

ทั้งสองข้อผิดเพราะไม่ได้ตอบคำถามที่ถาม ไม่ใช่เพราะเป็นการกระทำที่แย่ เป็นรูปแบบที่เจอซ้ำในข้อสอบแนวสถานการณ์

context และ memory คือข้อที่คนเตรียมน้อยที่สุด

วัตถุประสงค์ข้อสี่มีวงเล็บที่บอกคำตอบไว้แล้วสามทาง

  restart     เริ่มบทสนทนาใหม่
  summarize   ย่อสิ่งที่คุยมาแล้ว
  persist     เก็บไว้ให้อยู่ข้ามครั้ง

สามทางนี้คือคำตอบของคำถามคนละแบบ — งานที่เปลี่ยนเรื่องแล้วให้ restart งานยาวที่ยังเรื่องเดิมให้ summarize ส่วนของที่ต้องใช้ซ้ำข้ามครั้งให้ persist ซึ่งข้อสุดท้ายพาไปโดเมน 5 เรื่องการตั้งค่า Projects โดยตรง

เมื่อมันโกหก

"เลือกโมเดลที่เก่งที่สุดไว้ก่อน ปลอดภัยกว่า" คู่มือเขียนตรง ๆ ว่านั่นคือ การผลาญงบต้นทุนและเวลา และเป็นตัวเลือกที่ผิดในตัวอย่างของคู่มือเอง

"context เต็มแล้วก็เริ่มใหม่" วัตถุประสงค์ให้สามทาง ไม่ใช่ทางเดียว การเริ่ม ใหม่ทิ้งบริบทที่ยังต้องใช้ ไม่ใช่คำตอบที่ถูกเสมอ

"ต้องจำสเปกของแต่ละโมเดลให้ได้" วัตถุประสงค์ใช้คำว่า differentiate และ align ไม่ใช่ recall ข้อสอบถามว่าเลือกอันไหนกับงานแบบไหน

อ้างอิง

เอกสารทางการ

  • คู่มือสอบ CCAO-F หัวข้อ 6 โดเมน 3 · หัวข้อ 8 ตัวอย่างข้อที่สองและเฉลย

อ่านต่อในคอร์สนี้

วัดการตัดสินใจ

อ่านหน้านี้เป็นภาษาอังกฤษ