การรับรองความปลอดภัยในระบบนิเวศของ Generative AI: การปกป้องผู้ใช้จากเนื้อหาส่วนตัวที่ไม่ได้รับความยินยอม
อ่าน 4 นาที
ที่ Google Play ความปลอดภัยของผู้ใช้และความสำเร็จของนักพัฒนาแอปเป็นสิ่งที่ควบคู่กันไป เรายังคงเห็นการเติบโตของแอปที่มีฟีเจอร์ที่ AI สร้างขึ้น และการเพิ่ม Generative AI ลงในแอปเป็นวิธีที่ยอดเยี่ยมในการปลดล็อกความเป็นไปได้ด้านความคิดสร้างสรรค์ที่น่าทึ่ง อย่างไรก็ตาม ฟีเจอร์ AI ยังนำมาซึ่งความท้าทายด้านความปลอดภัยใหม่ๆ เช่น การเพิ่มขึ้นของการสร้างรูปภาพลับที่ไม่ได้เกิดจากความยินยอม (NCII) โดย AI นโยบายของ Google Play ไม่อนุญาตให้มีการอำนวยความสะดวก การสร้าง หรือการเผยแพร่เนื้อหาเกี่ยวกับเรื่องเพศที่ไม่ได้เกิดจากความยินยอมของทั้ง 2 ฝ่าย แอปพลิเคชันที่เป็นอันตรายซึ่งออกแบบมาเพื่อกำหนดเป้าหมาย คุกคาม หรือแสวงหาประโยชน์จากบุคคลไม่ควรมีอยู่ใน Google Play และเรามุ่งมั่นที่จะบังคับใช้นโยบายเพื่อให้ร้านค้าเป็นพื้นที่ที่ปลอดภัยสำหรับนักพัฒนาแอปในการเติบโต
เราทราบดีว่าพวกคุณส่วนใหญ่ทุ่มเทให้กับการสร้างเครื่องมือที่ใช้งานในเชิงบวกและมีจริยธรรม เราลงทุนอย่างมากในการปกป้องแพลตฟอร์ม การป้องกันทางเทคนิค และแหล่งข้อมูลสำหรับนักพัฒนาแอปเพื่อหยุดการละเมิด เพื่อปกป้องทั้งผลงานของคุณและฐานผู้ใช้ร่วมกันของเรา
วิธีที่เราปกป้องระบบนิเวศที่ใช้ร่วมกัน
การปกป้องแพลตฟอร์มเป็นความพยายามที่ต้องทำอย่างต่อเนื่อง ผู้ไม่ประสงค์ดีพยายามแสวงหาประโยชน์จากช่องทางการจัดจำหน่าย เส้นทางการสร้างรายได้ และขอบเขตของโมเดล เราได้ใช้กลยุทธ์การป้องกันแบบหลายชั้นเพื่อช่วยรักษาระบบนิเวศให้เป็นธรรมและปลอดภัย
- การป้องกันตลอดวงจรแอป: ฟีเจอร์ Generative AI มีการเปลี่ยนแปลงอยู่เสมอและคาดเดาได้ยากกว่า ดังนั้นการตรวจสอบความปลอดภัยจึงไม่ใช่การตรวจสอบเพียงครั้งเดียวเมื่อคุณส่งแอป เราทดสอบแอปอย่างต่อเนื่องตลอดวงจรของแอปเพื่อควบคุม NCII อย่างเข้มงวด โดยจะตรวจสอบแอปหลายพันรายการเพื่อตรวจจับการละเมิดก่อนที่จะส่งผลกระทบต่อผู้ใช้ในวงกว้าง พร้อมทั้งช่วยให้มั่นใจว่านักพัฒนาแอปจะเปิดตัวแอปได้อย่างมั่นใจ
- การปกป้องธุรกิจและรายได้ของคุณ: นอกเหนือจากการนำแอปที่ละเมิดออกจาก Google Play แล้ว ทีม Play และ Ads ยังทำงานร่วมกันเพื่อตัดเส้นทางการสร้างรายได้และการโฆษณาสำหรับผู้ไม่หวังดี แอปที่ถูกระงับหรือถูกนำออกเนื่องจากพยายามสร้างหรือสร้างรายได้จากเนื้อหาที่เป็นอันตราย เช่น NCII จะถูกบล็อกไม่ให้สร้างรายได้และโฆษณาในแพลตฟอร์มของเรา ซึ่งจะช่วยรักษาระบบนิเวศของโฆษณาและการสมัครใช้บริการให้ดีและสนับสนุนรายได้ของธุรกิจที่ถูกต้องตามกฎหมาย
- การทำงานร่วมกันในอุตสาหกรรม: เราทำงานร่วมกับองค์กรบุคคลที่สามที่เชี่ยวชาญด้านการป้องกัน NCII และกลุ่มวิจัยด้านความปลอดภัยของ AI ชั้นนำผ่านโครงการผู้เชี่ยวชาญด้านการแจ้งเตือนเนื้อหาของเรา โดยเฉพาะเพื่อระบุและจัดการกับการละเมิด NCII
แนวทางปฏิบัติแนะนำที่ใช้ได้จริงสำหรับฟีเจอร์ Generative AI
เรามีวิธีง่ายๆ ในการออกแบบและทดสอบแอปเพื่อให้สอดคล้องกับนโยบายเนื้อหาเกี่ยวกับเรื่องเพศและ นโยบายเนื้อหาที่ AI สร้างขึ้น เพื่อช่วยให้คุณสร้างแอปที่ปลอดภัยยิ่งขึ้นและมีประสบการณ์การเผยแพร่ที่ราบรื่นขึ้น
1. ช่วยเราปรับปรุงการตรวจสอบแอป
เพื่อรักษาความสมบูรณ์ของ Play Store เราจึงขอย้ำข้อกำหนดที่ปรับปรุงแล้วซึ่งมุ่งเน้นไปที่แอปพลิเคชัน Generative AI โดยเฉพาะ มาตรการเหล่านี้ออกแบบมาเพื่อป้องกันการสร้างเนื้อหาที่เป็นอันตราย ซึ่งรวมถึง NCII และสื่อที่ "นู้ด" ทีมตรวจสอบของเราจำเป็นต้องเห็นขอบเขตการใช้งานของแอปอย่างชัดเจนเพื่อให้เราตรวจสอบและอนุมัติแอปของคุณได้อย่างมีประสิทธิภาพและรวดเร็ว คุณป้องกันความล่าช้าในการตรวจสอบที่ไม่จำเป็นได้โดยทำดังนี้
- ตรวจสอบว่าบัญชีทดสอบมีสิทธิ์เข้าถึงฟีเจอร์ AI ทั้งหมดอย่างเต็มที่ในระหว่างการตรวจสอบ โปรดตรวจสอบว่าผู้ตรวจสอบสามารถเข้าถึงฟีเจอร์ Generative AI พรีเมียมของแอปได้ และไม่ได้ถูกบล็อกโดยข้อกำหนดในการสมัครใช้บริการหรือเพย์วอลล์ (รวมถึงฟีเจอร์ที่จำกัดการเข้าถึงตามพื้นที่ทางภูมิศาสตร์)
- เตรียมเอกสารเกี่ยวกับพรอมต์ด้านความปลอดภัยและกรณีที่ซับซ้อนที่คุณทดสอบ (เช่น หลักฐานว่าโมเดลพื้นฐานที่แอปของคุณเรียกใช้ปฏิเสธคำขอแก้ไขรูปภาพโจ่งแจ้งหรือดีปเฟกได้สำเร็จ) เราควรให้ความสนใจเป็นพิเศษกับพรอมต์ที่เกี่ยวข้องและคล้ายกันซึ่งมีคำว่า "nudify" หรือ "undress" การสร้างดีปเฟก และการแก้ไขและการสร้างรูปภาพโจ่งแจ้ง เนื่องจากมีความเสี่ยงสูงที่จะเป็นอันตรายต่อผู้ใช้ในบริบทเหล่านี้ หากทีมของเรามีคำถาม การที่คุณสามารถแชร์วิธีที่แอปจัดการคำขอที่เป็นการประสงค์ร้ายและอาจละเมิดได้อย่างรวดเร็วจะช่วยให้แอปได้รับอนุมัติและเผยแพร่ได้เร็วยิ่งขึ้น
หมายเหตุ: เนื่องจากความซับซ้อนของการประเมินความปลอดภัยของ Generative AI จึงอาจใช้เวลานานกว่าปกติในการตรวจสอบและอุทธรณ์อย่างละเอียดในบางครั้ง
2. ออกแบบแอปเพื่อความปลอดภัย
การทดสอบความทนทานของแอป Generative AI กับพรอมต์ที่เป็นปรปักษ์ โดยเฉพาะพรอมต์ที่พยายามบังคับให้แก้ไขอย่างโจ่งแจ้งโดยไม่ได้รับความยินยอม เป็นสิ่งสำคัญ เราได้แชร์แนวทางปฏิบัติแนะนำบางส่วนสำหรับการทดสอบความปลอดภัยที่อิงตามเฟรมเวิร์กมาตรฐานอุตสาหกรรมเพื่อช่วยคุณ ตัวอย่างเหล่านี้ยังไม่ครบถ้วนสมบูรณ์ และจะมีการพัฒนาต่อไปเช่นเดียวกับฟีเจอร์ Generative AI
- สร้างความปลอดภัยไว้ในสถาปัตยกรรมของคุณ เมื่อเลือกโมเดลพื้นฐานที่เหมาะกับธุรกิจของคุณมากที่สุด คุณจะมีความยืดหยุ่นในการสร้างสรรค์ในแบบของคุณ แต่ก็ไม่ควรพึ่งพาตัวกรองความปลอดภัยดั้งเดิมของโมเดลนั้นๆ เพียงอย่างเดียว รักษาความปลอดภัยของแอปด้วยการผสานรวมการควบคุมการกลั่นกรองอินพุตและเอาต์พุตที่ปรับแต่งแล้ว การห่ออินพุตในตัวคั่น XML ที่ไม่ซ้ำกันและการตรวจสอบเอาต์พุตก่อนที่จะโหลดจะช่วยป้องกันไม่ให้แอปสร้างสื่อที่ไม่ปลอดภัยได้
- รู้เท่าทันการดัดแปลงพรอมต์อยู่เสมอ แม้แต่โมเดลที่ปลอดภัยก็อาจถูกทดสอบด้วยวิธีแก้ปัญหาที่สร้างสรรค์ เมื่อทดสอบแอปกับพรอมต์ที่เป็นอันตรายอย่างจริงจัง เช่น การอัปโหลดรูปภาพและขอให้โมเดล "แสดงภาพฉากชายหาดที่ไม่มีเสื้อผ้า" คุณจะมั่นใจได้ว่าแอปจะไม่หลีกเลี่ยงคำสั่งด้านความปลอดภัยหลักและอนุญาตให้สร้างสื่อ NCII
- รักษาความรับผิดชอบต่อโฆษณา โปรดตรวจสอบแคมเปญโฆษณาอย่างใกล้ชิด คุณยังคงต้องรับผิดชอบต่อโฆษณาสำหรับแอปของคุณในท้ายที่สุด แม้ว่าโฆษณาอาจสร้างโดยบุคคลที่สามที่ได้รับอนุญาตก็ตาม เมื่อแอปโฆษณาความสามารถที่โจ่งแจ้งทางเพศหรือ "การเปลือย" ในแพลตฟอร์มใดก็ตาม แม้ว่าแอปจะไม่มีความสามารถเหล่านี้ก็ตาม เราจะบังคับใช้ตามนโยบายการโปรโมตแอปของ Play นโยบายโฆษณาของ Google ห้ามไม่ให้โฆษณาที่โปรโมตความสามารถเหล่านี้อย่างเด็ดขาด และเราจะระงับบัญชีของผู้ลงโฆษณาที่ละเมิดนโยบาย
- เปลี่ยนการโต้ตอบของผู้ใช้ให้เป็นสัญญาณ ความปลอดภัยเป็นกระบวนการที่ต้องทำอย่างต่อเนื่อง เมื่อใช้การตรวจสอบอย่างต่อเนื่อง ความคิดเห็นของผู้ใช้และความพยายามในการแจ้งที่ล้มเหลวจากผู้ใช้จะไม่ใช่อุปสรรค แต่เป็นข้อมูลเชิงลึกที่มีคุณค่า ใช้สัญญาณในโลกแห่งความเป็นจริงเหล่านี้เพื่อปรับตัวอย่างรวดเร็วและปรับแต่งขอบเขตที่กำหนดเองของแอป การเรียนรู้โดยตรงจากวิธีที่ผู้ใช้ใช้แอปจะช่วยให้คุณใช้เวลาน้อยลงในการไล่ตามปัญหาและมีเวลามากขึ้นในการสร้างธุรกิจที่เติบโต
นอกจากนี้ เราขอแนะนำให้ใช้แนวทางปฏิบัติหลักของ Android เหล่านี้เพื่อทำให้แอปมีความยืดหยุ่นมากขึ้น
สร้างสรรค์อย่างมีความรับผิดชอบไปด้วยกัน
นวัตกรรม AI ควรควบคู่ไปกับความปลอดภัยและความไว้วางใจของผู้ใช้เสมอ Google Play มุ่งมั่นที่จะขยายเครื่องมือด้านความปลอดภัย แหล่งข้อมูลสำหรับการทดสอบ และคำแนะนำเพื่อสนับสนุนคุณในทุกขั้นตอนของการพัฒนา
หากพบพฤติกรรมที่ละเมิดนโยบายหรือความเสี่ยงในแพลตฟอร์ม เราขอแนะนำให้คุณรายงานให้ทีมของเราทราบ ขอขอบคุณที่สร้างแอปอย่างมีความรับผิดชอบ เราตั้งตารอดูผลงานชิ้นต่อไปของคุณบน Google Play
-
ข่าวสารผลิตภัณฑ์เมื่อช่วงต้นปีที่ผ่านมา เราได้ย้ำถึงความมุ่งมั่นที่จะรักษา Android และ Google Play ให้ปลอดภัยสำหรับทุกคน รวมถึงรักษาสภาพแวดล้อมที่เจริญรุ่งเรืองซึ่งผู้ใช้สามารถเชื่อถือแอปที่ดาวน์โหลดและธุรกิจของคุณสามารถเติบโตได้
Matthew Forsythe, Ron Aquino • อ่าน 3 นาที -
ข่าวสารผลิตภัณฑ์วันนี้เรายินดีเป็นอย่างยิ่งที่จะประกาศการเปิดตัวไลบรารี AndroidX Security State เวอร์ชัน 1.1.0 และ Security State Provider เวอร์ชัน 1.0.0 อย่างเป็นทางการ
Maunik Shah, Alec Garcia, Joseph Yong • อ่าน 4 นาที -
ข่าวสารผลิตภัณฑ์วันนี้เราจะเปิดตัวชุดงานระยะยาว (LHT) ชุดแรก ซึ่งเป็นงานที่มีความซับซ้อนสูงและต้องใช้เวลาหลายวันหรืออาจถึง 1 สัปดาห์จึงจะทำเสร็จ นอกจากนี้ เรายังจะเปิดตัวการประเมินแบบ Agent โดยเริ่มจาก Agent จากผู้ให้บริการโมเดลที่เกี่ยวข้อง
Matthew McCullough • อ่าน 3 นาที
รับข้อมูลเชิงลึกด้านการพัฒนาแอป Android ล่าสุดส่งตรงถึงกล่องจดหมายของคุณทุกสัปดาห์