คู่มือการทดสอบการเล่นเกมกระดาน: วิธีทดสอบความสมดุลอย่างมืออาชีพ

หลังจาก 25 ปีในการพัฒนา Neutronium: Parallel Wars และจัดเซสชันการทดสอบการเล่นที่มีเอกสารรับรองมากกว่า 12 รายการ ฉันสามารถบอกคุณถึงความแตกต่างระหว่างการทดสอบการเล่นและการทดสอบการเล่นมืออาชีพ การขอให้เพื่อนเล่นเกมของคุณไม่ใช่การทดสอบการเล่น เป็นการพบปะกับเกมของคุณบนโต๊ะ การทดสอบการเล่นแบบมืออาชีพคือการตรวจสอบความสมดุลอย่างเป็นระบบ — ตัวชี้วัดที่กำหนด การทดสอบตัวแปรเดียว การรวบรวมข้อมูลที่มีโครงสร้าง และความมีระเบียบวินัยในการรักษาทุกเซสชันเสมือนเป็นการทดลองแทนที่จะเป็นประสบการณ์

คู่มือนี้ครอบคลุมถึงสิ่งที่ดูเหมือนในทางปฏิบัติ: วิธีตั้งค่าเซสชั่น สิ่งที่ควรวัด วิธีระบุหมวดหมู่เฉพาะของปัญหาเครื่องชั่ง และ (ในเชิงวิกฤต) ว่าควรหยุดการทดสอบและจัดส่งเมื่อใด หลักการนี้ใช้กับเกมที่ซับซ้อนใดๆ ตัวอย่างมาจากกลไก 47 รายการของ Neutronium: Parallel Wars และระดับจักรวาล 13 ระดับ ซึ่งให้ความซับซ้อนเพียงพอที่จะทดสอบความเครียดทุกวิธีที่อธิบายไว้ที่นี่

เหตุใดการทดสอบการเล่นส่วนใหญ่จึงล้มเหลว

ข้อผิดพลาดที่พบบ่อยที่สุดในการทดสอบการเล่น: การถามว่า "สนุกไหม" เมื่อสิ้นสุดเซสชั่น "ความสนุก" นั้นกว้างเกินกว่าจะปฏิบัติได้ ความสนุกไม่สามารถบอกคุณได้ว่าช่างคนไหนที่เสียสมดุล ความสนุกไม่สามารถบอกคุณได้ว่าการมีส่วนร่วมของเซสชันลดลงที่จุดใด ความสนุกเป็นเพียงบทสรุป ไม่ใช่การวินิจฉัย

ให้วัดเมตริกที่เฉพาะเจาะจงแทน: อัตราการชนะต่อฝ่าย, ความขัดแย้งแบบพลิกกลับไปสู่ครั้งแรก, ส่วนต่างของรายได้ในช่วงกลางเกม, ความยาวเซสชันต่อเฟส ตัวเลขเหล่านี้บอกคุณว่าจะดูที่ไหน "ความสนุก" ไม่ได้บอกคุณถึงสิ่งที่คุณไม่เคยสงสัย

ความล้มเหลวหลักของการทดสอบการเล่นแบบไม่มีโครงสร้าง: หากไม่มีเมตริกที่กำหนด คุณจะไม่สามารถแยกแยะปัญหาการออกแบบจากการปรับตัวของผู้เล่นได้ ผู้เล่นที่มีประสบการณ์จะปรับตัวเข้ากับกลไกที่พัง — พวกเขาสร้างกลยุทธ์เกี่ยวกับความผิดพลาด หยุดบ่นเกี่ยวกับมัน และทำให้ดูเหมือนว่า "วิธีการเล่นเกม" การวัดจะเผยให้เห็นสิ่งที่พฤติกรรมปกปิดอยู่

ภาพรวมกรอบงาน MEQA

สำหรับ Neutronium: Parallel Wars วิธีทดสอบการเล่นอย่างเป็นระบบคือ MEQA Framework — โครงสร้างสี่เสาหลักที่พัฒนาขึ้นตลอด 25 ปีของการทำซ้ำ แต่ละเสาหลักจะตอบสนองความต้องการในการทดสอบประเภทที่แตกต่างกัน:

ระเบียบวิธีของ MEQA Framework ฉบับสมบูรณ์ รวมถึงตัวชี้วัดเฉพาะที่ใช้สำหรับ Neutronium: Parallel Wars และระบบเกณฑ์การควบคุม QC ได้รับการบันทึกไว้โดยละเอียดที่ MEQA Framework: ระเบียบวิธีที่ได้รับการพิสูจน์แล้วสำหรับการทดสอบความสมดุลของเกมกระดาน คู่มือนี้เน้นที่การใช้งานจริงระดับเซสชัน

การตั้งค่าเซสชันการทดสอบการเล่น

เซสชันการทดสอบการเล่นระดับมืออาชีพมีสามขั้นตอน: การตั้งค่าก่อนเซสชัน การสังเกตระหว่างเซสชัน และการซักถามที่มีโครงสร้างหลังเซสชัน แต่ละระยะมีข้อกำหนดเฉพาะซึ่งการทดสอบการเล่นอย่างไม่เป็นทางการส่วนใหญ่จะข้ามไปโดยสิ้นเชิง

ก่อนเซสชัน: กำหนดการเปลี่ยนแปลงกลไกเดียวที่คุณกำลังทดสอบ จดบันทึกไว้ก่อนที่ผู้เล่นจะมาถึง หากคุณไม่สามารถระบุได้ว่า "วันนี้เรากำลังทดสอบว่าการทำให้ Nuclear Ports แบบทำลายได้จะลดอัตราส่วนรายได้ระหว่างผู้นำถึงรายได้สุดท้ายที่ต่ำกว่า 5:1 หรือไม่" แสดงว่าคุณยังไม่พร้อมที่จะเรียกใช้เซสชัน สมมติฐานจะต้องเฉพาะเจาะจงและเป็นเท็จ บันทึกตัวชี้วัดพื้นฐานจากเซสชันก่อนหน้าเพื่อการเปรียบเทียบโดยตรง

ระหว่างเซสชั่น: กำหนดผู้สังเกตการณ์หนึ่งคนที่ไม่เล่น งานของผู้สังเกตการณ์คือการบันทึก: ระยะเวลาเซสชันต่อเฟส เวลาตัดสินใจต่อเทิร์น (โดยเฉลี่ย) ช่วงเวลาใด ๆ ของความสับสนหรือการหลุดพ้น สถานะการชนะ/แพ้ต่อฝ่ายต่อจักรวาล ผู้สังเกตการณ์ไม่มีส่วนร่วมในการเล่น ไม่อธิบายกฎ และไม่ตอบคำถาม หากผู้เล่นมีคำถาม นั่นคือข้อมูล บันทึกสิ่งที่ทำให้พวกเขาสับสนและเพราะเหตุใด

การพูดคุยสรุปหลังเซสชัน: สูงสุด 15 นาที คำถามที่มีโครงสร้างเท่านั้น — คำถามเชิงพฤติกรรมที่เฉพาะเจาะจง ไม่ใช่ "คุณสนุกไหม" ดูส่วนคำถามที่พบบ่อยสำหรับคำถามที่จะใช้ รวบรวมคำตอบที่เป็นลายลักษณ์อักษรเมื่อเป็นไปได้ - คำตอบด้วยวาจาจะสูญเสียรายละเอียดและทำให้เกิดอคติทางสังคม (ผู้เล่นไม่เต็มใจที่จะพูดสิ่งที่เป็นลบกับนักออกแบบโดยตรง)

ข้อมูลที่จะรวบรวมทุกเซสชันโดยไม่มีข้อยกเว้น:

• ระยะเวลาเซสชันต่อระดับจักรวาล
• ชนะ/แพ้ต่อฝ่าย
• นับถอยหลังสู่การต่อสู้ครั้งแรก
• ส่วนต่างรายได้ระหว่างผู้นำและผู้เล่นตามหลังในช่วงกลางเกม
• จำนวนเหตุการณ์ความสับสนของผู้เล่น (หมายถึง: ผู้เล่นถามคำถามเกี่ยวกับกฎหรือดำเนินการที่ผิดกฎหมาย)

การระบุปัญหายอดคงเหลือ

ปัญหาความสมดุลแบ่งออกเป็นห้าประเภท โดยแต่ละประเภทมีสัญญาณที่แตกต่างกันในข้อมูล:

ผู้นำที่หนีไม่พ้น: สัญญาณ — ผู้เล่นชั้นนำไม่เคยพ่ายแพ้หลังจากจักรวาลที่ 5 ใน 3 จาก 4 เซสชัน เกณฑ์: หากผู้นำชนะจากตำแหน่งที่พวกเขาดำรงตำแหน่งในจักรวาลที่ 4 มากกว่า 70% ของเซสชัน เกมจะจบลงอย่างมีประสิทธิภาพที่จักรวาลที่ 4 ตรวจสอบรายได้และกลไกของอาณาเขตในจักรวาลที่ 1–4

การวิเคราะห์อัมพาต: สัญญาณ — เวลาการตัดสินใจโดยเฉลี่ยต่อเทิร์นเพิ่มขึ้นเมื่อจักรวาลดำเนินไปเร็วกว่าการรับประกันความซับซ้อนในการตัดสินใจ การเลี้ยวโดยเฉลี่ย 5 นาทีในจักรวาลที่ 3 กลายเป็นการเลี้ยวเฉลี่ย 20 นาทีในจักรวาลที่ 6 โดยมีกลไกใหม่เพียง 2 กลไกที่เพิ่มเข้ามา บ่งชี้ถึงปัญหาปฏิสัมพันธ์ของกลไก ไม่ใช่ปัญหาความซับซ้อน ตรวจสอบว่าการตัดสินใจใดใช้เวลามากที่สุด

การครอบงำฝ่าย: สัญญาณ — ฝ่ายเดียวที่ชนะ 60% หรือมากกว่าของเซสชันในการทดสอบ 5 ครั้งขึ้นไป อัตราการชนะที่คาดหวังในเกม 4 ฝ่ายที่สมดุลจะอยู่ที่ประมาณ 25% ที่ 60% ฝ่ายไม่เพียงแต่ดีขึ้นเท่านั้น แต่ยังมีความได้เปรียบเชิงโครงสร้างที่ฝ่ายอื่นๆ ไม่สามารถเอาชนะได้ด้วยการเล่นที่ดีกว่า สำรวจกลไกอันเป็นเอกลักษณ์ของฝ่ายที่โดดเด่นเพื่อดูเอฟเฟกต์การโต้ตอบที่คาดไม่ถึง

การมีส่วนร่วมลดลง: สัญญาณ — ผู้เล่นเริ่มนิ่งเฉยหรือเลิกมีส่วนร่วมอย่างเห็นได้ชัดในจักรวาลใดจักรวาลหนึ่ง พฤติกรรมที่สังเกตได้: ผู้เล่นเช็คโทรศัพท์ มองออกไปจากกระดาน ถามว่า "ถึงตาฉันเมื่อไหร่" สิ่งเหล่านี้เป็นเหตุการณ์ที่สามารถวัดผลได้ บันทึกเมื่อมันเกิดขึ้นและจักรวาลใดที่กำลังดำเนินอยู่

กฎตัวแปรเดียว

กฎตัวแปรเดียวเป็นหลักการที่สำคัญที่สุดในการทดสอบเครื่องชั่งและเป็นกฎที่ถูกละเมิดบ่อยที่สุด กฎ: เปลี่ยนแปลงสิ่งเดียวระหว่างเซสชัน

เหตุผลก็คือความชัดเจนในการวินิจฉัย หากคุณเปลี่ยนกลไกสามอย่างและเกมดีขึ้น คุณจะไม่รู้ว่าการเปลี่ยนแปลงใดมีส่วนรับผิดชอบ คุณอาจแก้ไขปัญหาหนึ่งปัญหาและสร้างอีกสองปัญหาที่ยังไม่ปรากฏ คุณอาจแก้ไขอาการและทิ้งสาเหตุที่แท้จริงไว้ คุณไม่สามารถรู้ได้ — เพราะคุณเปลี่ยนแปลงสามสิ่งพร้อมกัน

นำไปใช้กับ Neutronium: Parallel Wars: เมื่อ Universe 7 รู้สึกว่า "เร็วเกินไป" — เซสชันทำงานสั้นกว่าที่คาดไว้โดยที่ผู้เล่นรู้สึกเร่งรีบ — มีการตรวจสอบสาเหตุที่เป็นไปได้สามประการในเซสชันแยกกัน:

• เซสชั่น A: จังหวะที่ขยาย — เพิ่มหนึ่งรอบการตกแต่งเพิ่มเติมให้กับจักรวาล 7 ผลลัพธ์: ความยาวเซสชั่นเพิ่มขึ้น 8 นาที คะแนนการมีส่วนร่วมไม่เปลี่ยนแปลง ไม่ใช่สาเหตุที่แท้จริง
• เซสชัน B: มีการเพิ่มกลไกเพิ่มเติมในจักรวาลที่ 7 ผลลัพธ์: ความยาวเซสชันเพิ่มขึ้น 5 นาที คะแนนการมีส่วนร่วมเพิ่มขึ้น ระบุสาเหตุบางส่วน
• เซสชัน C: จัดลำดับกลไกที่มีอยู่ใหม่เพื่อกระจายความหนาแน่นของการตัดสินใจให้เท่าเทียมกันมากขึ้น ผลลัพธ์: ความยาวเซสชันเพิ่มขึ้น 6 นาที และคะแนนการมีส่วนร่วมเพิ่มขึ้นอย่างมาก ระบุสาเหตุที่แท้จริง — การรวมกลุ่มกลไกที่จุดสิ้นสุดของจักรวาลทำให้เกิดจุดจบที่เร่งรีบ

หากไม่มีการทดสอบการเปลี่ยนแปลงแต่ละรายการแยกกัน ข้อมูลเชิงลึกของเซสชัน C — ปัญหาการจัดกลุ่มกลไก — ก็คงมองไม่เห็น การเปลี่ยนแปลงร่วมกันของ B+C อาจดูเหมือน "การเพิ่มกลไกช่วย" เมื่อการแก้ไขจริงกำลังจัดลำดับสิ่งที่มีอยู่แล้วใหม่

การทดสอบกับกลุ่มประสบการณ์แบบผสม

ความท้าทายด้านความสมดุลที่ยากที่สุดในการออกแบบเกมกระดานไม่ใช่ความสมดุลของฝ่ายหรือการขยายรายได้ แต่เป็นการทำให้แน่ใจว่าผู้เล่นที่มีประสบการณ์จะไม่ครอบงำผู้เล่นใหม่ ๆ ในเซสชั่นเดียวกันเพียงเล็กน้อย นักออกแบบเกมส่วนใหญ่เพิกเฉยต่อสิ่งนี้โดยสิ้นเชิง และสูญเสียครอบครัวและผู้ชมทั่วไปไป

สำหรับ Neutronium: Parallel Wars นั้น MEQA เสาหลักของความสามารถในการปรับตัวติดตามอัตราการชนะในเซสชันประสบการณ์แบบผสมอย่างชัดเจน ก่อนที่จะแก้ไขปัญหา ผู้เล่นที่มีประสบการณ์ชนะ 78% ของเซสชั่นกลุ่มผสม ซึ่งเป็นความไม่สมดุลอย่างรุนแรงซึ่งจะทำให้ผู้เล่นใหม่ไม่สามารถกลับมาในเซสชั่นที่ 2 ได้

วิธีแก้ปัญหาคือ ระบบแฮนดิแคป Progress Journal: ผู้เล่นที่มีประสบการณ์ซึ่งเคยชนะจักรวาลมาก่อนจะเริ่มต้นด้วยยอดคงเหลือ Nn ติดลบตามสัดส่วนความได้เปรียบด้านประสบการณ์ของพวกเขา การปรับเทียบมาจาก MEQA ข้อมูลเซสชัน:

เป้าหมายสำหรับอัตราการชนะแบบประสบการณ์เทียบกับใหม่คือ 55–65% ต่ำกว่า 55% หมายความว่าไม่มีการแสดงออกของทักษะที่มีความหมาย — ผู้เล่นที่มีประสบการณ์ไม่ได้รับประโยชน์จากความรู้ของพวกเขา สูงกว่า 65% หมายความว่าประสบการณ์ของผู้เล่นใหม่เสียหายอย่างมีประสิทธิภาพ พวกเขาไม่สามารถแข่งขันได้ไม่ว่าจะตัดสินใจอย่างไรก็ตาม

การระบุช่องว่างของประสบการณ์ในข้อมูล: ติดตามจำนวนเซสชันของผู้เล่นแต่ละคนควบคู่ไปกับข้อมูลการชนะ/แพ้ หากผู้เล่นที่มี 10 เซสชั่นชนะ 75% ของเกมกับผู้เล่นที่มี 2 เซสชั่น การปรับเทียบแฮนดิแคปจำเป็นต้องมีการปรับเปลี่ยน — หรือกลไกเองกำลังสร้างข้อได้เปรียบที่ไม่อาจย้อนกลับได้ซึ่งทบต้นเร็วเกินไป

"หน้าผา 12 เซสชัน" ใน Neutronium: หลังจากที่ผู้เล่นโฮสต์สะสมเซสชันมากกว่า 12 เซสชัน เกมก็ไม่สามารถเข้าถึงได้สำหรับผู้เล่นใหม่ที่เข้าร่วมเป็นครั้งแรก ช่องว่างความรู้ด้านกลไกนั้นใหญ่เกินกว่าจะเชื่อมโยงผ่านการเล่นปกติได้ แก้ไข: ระบบบันทึกความคืบหน้า ซึ่งทำให้มองเห็นความแตกต่างของประสบการณ์และใช้การแก้ไขตามสัดส่วน หากไม่มีข้อมูลที่แสดงการสิ้นสุดของเซสชัน 12 เซสชันโดยเฉพาะ ปัญหานี้คงจะปรากฏเป็น "ผู้เล่นใหม่จะไม่กลับมา" แทนที่จะเป็น "ผู้เล่นใหม่ในเซสชัน 1 ที่มีโฮสต์ 12 เซสชันจะมีอัตราการชนะ 23%"

เมื่อใดที่ควรหยุดการทดสอบการเล่น

หนึ่งในข้อผิดพลาดที่พบบ่อยที่สุดในการพัฒนาเกมกระดานคือการทดสอบการเล่นอย่างไม่มีกำหนด — โดยใช้ "เรายังทดสอบการเล่น" เป็นเหตุผลในการหลีกเลี่ยงการจัดส่ง นี่คือการตอบโต้ด้วยความกลัวซึ่งแต่งกายอย่างเข้มงวด เมื่อถึงจุดหนึ่ง ข้อมูลจะบอกคุณว่าคุณทำเสร็จแล้ว

การทดสอบผลตอบแทนที่ลดลง: หากเซสชันการทดสอบการเล่นสามเซสชันติดต่อกันไม่มีจุดข้อมูลที่ดำเนินการได้ — ไม่มีเมตริกใดเกินเกณฑ์ QC ไม่มีการบันทึกเหตุการณ์ความสับสนใหม่ ไม่มีการระบุการมีส่วนร่วมที่ลดลง — คุณมาถึงจุดอิ่มตัวของการทดสอบการเล่นสำหรับสถานะปัจจุบันของเกมแล้ว เซสชันเพิ่มเติมกำลังสร้างการยืนยัน ไม่ใช่การค้นพบ

Neutronium: Parallel Wars เกณฑ์ความพร้อมของเรือคือ:

1. อัตราการชนะทั้ง 4 ฝ่ายอยู่ภายใน 10% ของจำนวนที่เท่ากัน (เป้าหมาย: 25% ต่อฝ่าย ช่วงที่ยอมรับได้: 22–28% ต่อฝ่าย)
2. คะแนนการมีส่วนร่วมอยู่เหนือ 4 จาก 5 ในทุกเซสชันที่ Universes 1–6
3. ไม่มีเหตุการณ์ความสับสนที่บันทึกไว้ใน 3 เซสชันติดต่อกันที่จักรวาล 1–3 (เกมหลัก)
4. อัตราการชนะแบบผสม (ประสบการณ์เทียบกับใหม่) ภายในช่วง 55–65% ใน 3 เซสชันติดต่อกัน

เมื่อตรงตามเกณฑ์ทั้งสี่ในสามเซสชันติดต่อกัน เกมจะอยู่ในสภาพสมบูรณ์ ไม่สมบูรณ์แบบ — "สมบูรณ์แบบ" ไม่ใช่สถานะที่มีความหมายสำหรับเกม สภาพการจัดส่งหมายความว่าข้อมูลไม่ได้ระบุการปรับปรุงที่จะเปลี่ยนแปลงประสบการณ์ของผู้เล่นในลักษณะที่วัดผลได้อีกต่อไป

คำถามที่พบบ่อย