AI Pilot Program

AI Pilot Program คืออะไร

AI pilot program คือการนำ AI สำหรับงานบริการลูกค้าไปใช้งานแบบควบคุม ในขอบเขตที่กว้างกว่า proof of concept แต่แคบกว่าการ rollout เต็มรูปแบบทั้งองค์กร ขณะที่ POC ตอบคำถามว่า "สิ่งนี้ใช้ได้จริงไหม" pilot ตอบคำถามว่า "ใช้ได้จริงในวงกว้างหรือไม่ และ ROI เกิดขึ้นจริงหรือเปล่า" โดยทั่วไป pilot ใช้เวลา 4-12 สัปดาห์ กับกลุ่มลูกค้า ช่องทาง หรือชุด use case ที่กำหนดไว้

วิธีวางโครงสร้าง AI Pilot

• กำหนดเป้าหมายที่วัดผลได้: ตั้งเป้าหมายเฉพาะสำหรับอัตราการแก้ไขปัญหา CSAT handle time และต้นทุนต่อทิกเก็ต
• เลือกขอบเขตให้เหมาะสม: ช่องทางเฉพาะ (เริ่มจากแชท) กลุ่มลูกค้า (ปัญหา Tier 1) หรือสายผลิตภัณฑ์ (แบรนด์หรือภูมิภาคเดียว)
• ใช้ทราฟฟิกจริง: pilot ควรรับมือการโต้ตอบกับลูกค้าจริง ไม่ใช่การจำลอง
• มีกลุ่มควบคุม: เปรียบเทียบการโต้ตอบที่ AI ดูแลกับที่เจ้าหน้าที่ดูแลในช่วงเวลาเดียวกัน
• ติดตามตัวชี้วัดนำ: อย่ารอวัดผลตอนจบ ให้ติดตามแนวโน้มรายวันและรายสัปดาห์
• วางเกณฑ์การผ่าน pilot: กำหนดไว้ล่วงหน้าว่าผลลัพธ์แบบใดจะนำไปสู่การ rollout เต็มรูปแบบ หรือต้องปรับปรุงต่อ

ทำไม Pilot จึงล้มเหลว

งานวิจัยในอุตสาหกรรม: 88% ของโปรเจกต์ AI pilot ไปไม่ถึงการใช้งานจริงในระดับ production สาเหตุหลักคือ เกณฑ์ความสำเร็จไม่ชัดเจน การ integration ไม่ลึกพอ (AI ตอบคำถามได้แต่ลงมือทำไม่ได้) "pilot purgatory" (pilot ดำเนินต่อไปเรื่อย ๆ โดยไม่มีการตัดสินใจ) และองค์กรขาดความมุ่งมั่นที่จะลงมือตามผลลัพธ์

ความย้อนแย้งของ AI pilot คือ การจำกัดขอบเขต (ซึ่งจำเป็นต่อการทดสอบแบบควบคุม) ก็จำกัดความสามารถของ AI ในการแสดงคุณค่าอย่างเต็มที่ด้วย AI pilot ที่จำกัดอยู่แค่การตอบ FAQ จะไม่มีวันแสดงอัตรา autonomous resolution ที่เป็นไปได้เมื่อ AI ลงมือทำในระบบหลังบ้านได้

จุดเด่นของ Maven: Pilot ที่กลายเป็น Production

โมเดลการ deploy ที่รวดเร็วของ Maven AGI ทำให้ pilot เริ่มต้นด้วยโครงสร้างพื้นฐานและ integration ระดับ production ตั้งแต่วันแรก ไม่มี "pilotware" ที่ต้องสร้างใหม่สำหรับ production เมื่อผลลัพธ์ pilot ผ่านเกณฑ์ การขยายสู่การใช้งานเต็มรูปแบบเป็นเพียงการเปลี่ยนการตั้งค่า ไม่ใช่โปรเจกต์ใหม่

ผลลัพธ์จริงกับ Maven: K1x deploy Maven AGI ได้ใน 1 สัปดาห์ และแก้ไขปัญหาได้ 80% ย่นระยะทางจาก pilot สู่ production แบบเดิมให้เหลือเพียงไม่กี่วัน เมื่อ AI แก้ไขปัญหาได้ 80% ตั้งแต่สัปดาห์แรก เป้าหมายหลักของ pilot จึงกลายเป็นการสร้างความมั่นใจภายในองค์กร มากกว่าการพิสูจน์เทคโนโลยี

คำถามที่พบบ่อย

AI pilot ควรใช้เวลานานเท่าใด

4-8 สัปดาห์ให้ข้อมูลเพียงพอสำหรับการสรุปผลที่มีความหมาย pilot ที่สั้นกว่านี้ขาดนัยสำคัญทางสถิติ ส่วน pilot ที่ยาวกว่านี้เสี่ยงต่อ "pilot purgatory" คือดำเนินไปเรื่อย ๆ โดยไม่มีการตัดสินใจ go/no-go ควรกำหนดวันตัดสินใจตั้งแต่เริ่ม pilot และยึดตามนั้น

ผลลัพธ์ pilot แบบใดที่สมควร rollout เต็มรูปแบบ

ไม่มีเกณฑ์ตายตัว แต่สัญญาณที่ชัดเจน ได้แก่ อัตราการแก้ไขปัญหาเกิน 60% (และยังเพิ่มได้อีก) CSAT ของการโต้ตอบด้วย AI เทียบเท่าหรือสูงกว่าการโต้ตอบโดยเจ้าหน้าที่ การลดต้นทุนที่วัดผลได้ และความกระตือรือร้นของทีมซัพพอร์ต (เจ้าหน้าที่ที่ทำงานร่วมกับ AI เห็นคุณค่าของมัน)

Pilot กับ phased rollout ต่างกันอย่างไร

Pilot คือการประเมินว่าสิ่งนี้ดีพอที่จะลงทุนจริงหรือไม่ ส่วน phased rollout คือการ deploy ที่ตัดสินใจแล้วและขยายทีละขั้น pilot จบลงด้วยการตัดสินใจ phased rollout คือการลงมือตามการตัดสินใจนั้น แนวทางของ Maven มักรวมสองขั้นตอนนี้เข้าด้วยกัน เพราะ pilot ได้ผลดีจนกลายเป็นเฟส 1 ของการ rollout