ทดสอบแอป

แอป Home APIs มีข้อควรพิจารณาและความท้าทายเฉพาะตัว ซึ่งแตกต่างจากแอป Android ประเภทอื่นๆ รวมถึงทรัพยากร Dependency กับอุปกรณ์สมาร์ทโฮมจริง ความน่าเชื่อถือของเครือข่าย ความปลอดภัยและความเป็นส่วนตัว ตลอดจนความสามารถในการทำงานร่วมกันของอุปกรณ์และโปรโตคอล ความแตกต่างเหล่านี้ส่งผลต่อการทดสอบ

ตั้งค่าสภาพแวดล้อมการทดสอบ

สภาพแวดล้อมการทดสอบที่มีประสิทธิภาพเป็นสิ่งสำคัญอย่างยิ่งสำหรับการทดสอบแอป Home API

การแยกอุปกรณ์ทดสอบ Home API ในเครือข่าย Wi-Fi เฉพาะเป็นกลยุทธ์ที่ดี ซึ่งจะช่วยป้องกันการรบกวนจากอุปกรณ์อื่นๆ และให้คุณจำลอง สภาวะเครือข่ายต่างๆ เช่น แบนด์วิดท์ที่ถูกจำกัด

คุณจะต้องทดสอบโดยใช้อุปกรณ์สมาร์ทโฮมหลายประเภทจากผู้ผลิตที่หลากหลาย อย่าลืมทดสอบกับอุปกรณ์จริง อุปกรณ์เสมือนและโปรแกรมจำลองมีประโยชน์ แต่ไม่ควรใช้เพียงอย่างเดียว

ในทำนองเดียวกัน การทดสอบแอปกับอุปกรณ์ Android ที่หลากหลายจากผู้ผลิตหลายรายที่มีขนาดหน้าจอแตกต่างกัน และใช้ Android เวอร์ชันต่างๆ จะช่วยยืนยันความเข้ากันได้ในวงกว้าง

เตรียมเครื่องมือ

เครื่องมือต่อไปนี้มีประโยชน์ในการทดสอบแอป Home APIs

เครื่องมือ คำอธิบาย
Google Home Plugin for Android Studio ให้สิทธิ์เข้าถึง Google Assistant Simulator, Home Graph Viewer, Google Cloud Logging และโปรแกรมดูบันทึกของ Android Debug Bridge (adb)
Google Home Playground ไม่สามารถใช้แทนการทดสอบกับอุปกรณ์จริงได้ แต่มีประโยชน์อย่างมากในสถานการณ์การทดสอบหลายอย่าง
Matter Virtual Device (MVD) แอปจำลองอีกแอปหนึ่งที่อาจมีประโยชน์เมื่อทดสอบกับอุปกรณ์ Matter ในแอป Home APIs
Espresso ช่วยให้คุณทำการทดสอบ UI โดยอัตโนมัติได้ คุณต้องจำลอง API พื้นฐาน เพื่อจำลองการโต้ตอบกับฮาร์ดแวร์
โปรแกรมจำลองเครือข่าย ช่วยให้คุณจำลองสภาพเครือข่ายและการตอบกลับของ API ที่แตกต่างกันได้ ซึ่งจะมีประโยชน์อย่างยิ่งหาก Home API ใช้แบ็กเอนด์ระบบคลาวด์
Logcat ของ Android Studio จัดการและวิเคราะห์ข้อมูลบันทึก

ใช้แนวทางการทดสอบและกลยุทธ์ที่แตกต่างกัน

คุณควรใช้แนวทางการทดสอบที่หลากหลายกับแอป Home APIs สำหรับข้อมูลทั่วไปเกี่ยวกับวิธีการต่างๆ โปรดดูทดสอบแอปใน Android นอกเหนือจากการทดสอบประสบการณ์ของผู้ใช้และการทดสอบความปลอดภัยที่คาดหวังให้แอป Android ทั้งหมดดำเนินการแล้ว การทดสอบบางส่วนมีความเกี่ยวข้องเป็นพิเศษกับแอป Home APIs และจะมีการไฮไลต์รายละเอียดเพิ่มเติมในส่วนต่อไปนี้

การทดสอบฟังก์ชัน

คุณอาจต้องให้ความสนใจเป็นพิเศษกับบางส่วนต่อไปนี้ ทั้งนี้ขึ้นอยู่กับความสามารถของแอป

  1. การค้นหาและการจับคู่อุปกรณ์ รวมถึงการตั้งค่าและการจับคู่เริ่มต้นกับ อุปกรณ์ใหม่ การค้นหาอุปกรณ์ที่มีอยู่ซ้ำหลังจากรีสตาร์ทแอป การรีบูต อุปกรณ์ หรือการเปลี่ยนแปลงเครือข่าย นอกจากนี้ ให้ตรวจสอบสถานการณ์ต่างๆ เช่น อุปกรณ์ที่ไม่ตอบสนอง หรือผู้ใช้ป้อนข้อมูลเข้าสู่ระบบที่ไม่ถูกต้อง
  2. การซิงค์สถานะเพื่อให้แน่ใจว่าแอปจะอัปเดตเพื่อแสดงสถานะปัจจุบันได้อย่างถูกต้อง อย่างทันท่วงที
  3. วิธีจัดการและบังคับใช้สิทธิ์ โดยเฉพาะอย่างยิ่งหากแอปของคุณรองรับ ผู้ใช้หลายคนหรือสิทธิ์เข้าถึงบ้านที่แชร์ ซึ่งรวมถึงการยืนยันว่าแอปของคุณ จัดการสิทธิ์ที่ถูกเพิกถอนได้อย่างราบรื่น
  4. หากแอปของคุณรองรับฉาก เช่น ฉาก "ราตรีสวัสดิ์" ที่ปิดไฟทั้งหมด ให้ทดสอบการสร้าง การแก้ไข และการเรียกใช้ฉาก ทดสอบ การทำงานอัตโนมัติ รวมถึงเงื่อนไขเริ่มต้นและการดำเนินการ

การทดสอบประสิทธิภาพ

ตรวจสอบว่าแอปตอบสนองได้ดีและไม่มีเวลาในการตอบสนองที่ไม่จำเป็น หากเป็นไปได้ ให้ทดสอบกับอุปกรณ์จำนวนมากเพื่อประเมินความสามารถในการปรับขนาด และประสิทธิภาพของแอปภายใต้ภาระงาน นอกจากนี้ ให้ดูการใช้ CPU, หน่วยความจำ และแบตเตอรี่ ของแอป โดยเฉพาะอย่างยิ่งในระหว่างการสื่อสารกับอุปกรณ์ที่ใช้งานอยู่ เพื่อดูว่า การใช้ทรัพยากรของแอปสมเหตุสมผลหรือไม่

การทดสอบความน่าเชื่อถือและความเสถียร

เนื่องจากแอปที่ใช้ Home API ต้องอาศัยการเชื่อมต่อเครือข่าย คุณจึงควรทดสอบแอปกับสถานการณ์ต่อไปนี้

  1. ความผันผวนของเครือข่าย
    • จำลองการขาดหายของ Wi-Fi, สัญญาณอ่อน และการสลับเครือข่าย
    • ตรวจสอบว่าแอปของคุณจัดการการยกเลิกการเชื่อมต่อและการเชื่อมต่อใหม่ได้อย่างราบรื่น
    • ตรวจสอบว่าคําสั่งเข้าคิวและดําเนินการเมื่อการเชื่อมต่อกลับมาทํางานอีกครั้ง หรือ แสดงข้อความแสดงข้อผิดพลาดที่เหมาะสม
    • ทดสอบแอปจากเครือข่ายระยะไกล ไม่ใช่แค่จากเครือข่ายในบ้าน
  2. การยกเลิกการเชื่อมต่ออุปกรณ์
    • ถอดปลั๊กอุปกรณ์
    • ปิดอุปกรณ์แล้วเปิดใหม่
  3. การดำเนินการพร้อมกัน
    • ส่งลำดับคำสั่งอย่างรวดเร็ว
    • ให้ผู้ใช้หลายคนลองควบคุมอุปกรณ์เดียวกันพร้อมกัน
    • ทดสอบฉากและการทำงานอัตโนมัติที่ทับซ้อนกัน
  4. การจัดการข้อผิดพลาด
    • บังคับให้เกิดข้อผิดพลาดของ API เช่น โดยการจำลองการตอบกลับของเซิร์ฟเวอร์ Cloud API
    • ทดสอบอินพุตที่ไม่ถูกต้องจากผู้ใช้
    • ยืนยันการลดลงอย่างค่อยเป็นค่อยไปและข้อความแสดงข้อผิดพลาดที่ให้ข้อมูล
  5. ความน่าเชื่อถือ - เรียกใช้แอปและอุปกรณ์ที่เชื่อมต่อเป็นระยะเวลานานเพื่อค้นหาปัญหาการรั่วไหลของหน่วยความจำหรือความเสถียรที่อาจเกิดขึ้น

ก่อนเปิดตัวแอป

เราขอแนะนำให้ทดสอบแอปที่ใช้ Home API อย่างละเอียดเพื่อยืนยันว่าแอปเป็นไปตามข้อกำหนดด้านฟังก์ชันการทำงานและคุณภาพทั้งหมดก่อนเปิดตัว ใช้รายงานการทดสอบแอป Google Home APIs เป็นแนวทางในการทดสอบฟังก์ชันการทำงานของแอป

หากได้รับคำขอให้ส่งรายงานการทดสอบแอป Google Home APIs ให้ส่งรายงานไปยัง Technical Account Manager (TAM) ของ Google เพื่อให้ตรวจสอบรายงาน และใช้เป็นข้อมูลอ้างอิงเมื่อทดสอบแอป