Bough: เครื่องมือวิเคราะห์โทเค็นและเซสชัน AI เจาะลึกโปรเจกต์

การพัฒนาซอฟต์แวร์ด้วย AI มักทิ้งคำถามคาใจว่าเราใช้เวลาไปเท่าไรและหมดเงินไปกับค่าโทเค็นเท่าใดในโปรเจกต์ล่าสุด ตัวเลขคร่าวๆ อย่างการทำโปรเจกต์ราวหนึ่งสัปดาห์หรือการใช้งานแพ็กเกจราคารายเดือนอาจไม่ได้ให้คำตอบที่แท้จริงว่าฟีเจอร์ไหนกินเวลา หรือข้อผิดพลาดจุดใดทำให้ต้องวนแก้จนเสียเงินค่าโทเค็นไปหลายสิบดอลลาร์

ด้วยความสงสัยนี้ นักพัฒนาจึงได้สร้างเครื่องมือที่มีชื่อว่า Bough ขึ้นมา เพื่อตรวจสอบข้อมูลที่ถูกบันทึกไว้อยู่แล้วบนเครื่องคอมพิวเตอร์ โปรเจกต์ทดสอบที่นำมาวิเคราะห์ผ่านเครื่องมือนี้สร้างสถิติที่น่าสนใจออกมา โดยใช้ไปทั้งหมด 542 พรอมต์ แบ่งเป็น 32 เซสชัน ใช้เวลาหน้าจอรวม 36 ชั่วโมง และมีค่าใช้จ่ายจากอัตรา API สูงถึง 1,278 ดอลลาร์

ภาพประกอบจากคลังภาพสต็อก ไม่ใช่ภาพจากเหตุการณ์จริง

เครื่องมือ AI ยอดนิยมอย่าง Claude Code, Codex และ Pi ต่างก็บันทึกทรานสคริปต์ของทุกเซสชันลงในเครื่องของผู้ใช้งานโดยอัตโนมัติ ไม่ว่าจะเป็นทุกพรอมต์ ไฟล์ที่เอเจนต์แก้ไข คำสั่งที่รัน และจำนวนโทเค็นที่เผาผลาญไป ข้อมูลเหล่านี้ถูกเก็บย้อนหลังไปตามระยะเวลาที่เอเจนต์กำหนด แต่ปัญหาคือไม่มีใครเปิดอ่านไฟล์เหล่านี้เพราะมันอยู่ในรูปของกำแพงข้อมูล JSON ขนาดยักษ์ที่อ่านไม่รู้เรื่อง