Các ứng dụng di động hiện đại phụ thuộc nhiều vào nội dung đa phương tiện do người dùng tạo để tăng mức độ tương tác và tỷ lệ giữ chân người dùng. Các ứng dụng có sự khác biệt tự nhiên về chất lượng nội dung do phạm vi rộng của các chức năng thiết bị, điều kiện ánh sáng và trải nghiệm người dùng. Đối với những ứng dụng quản lý số lượng lớn ảnh và video đến từ nhiều nguồn, bạn có thể nâng cao chất lượng cơ bản của nội dung do người dùng tạo này. Để duy trì chất lượng tối ưu, bạn cần cân bằng một cách cẩn thận giữa mức độ nén cần thiết cho các hoạt động như chỉnh sửa, tải lên và tải xuống, đồng thời vẫn giữ đủ chi tiết để sử dụng với độ trung thực cao.
Tổng quan về Media Enhancement API
Media Enhancement API trong Dịch vụ Google Play cung cấp một giải pháp AI toàn diện trên thiết bị để khắc phục khoảng cách này. API này sử dụng tính năng tăng tốc Đơn vị xử lý đồ hoạ (GPU) trên thiết bị để cải thiện chất lượng cao và độ trễ thấp cho hình ảnh và video. Tính năng này đạt được những điểm cải tiến này thông qua các tính năng như ánh xạ tông màu tự động, giảm mờ, giảm nhiễu và tăng độ phân giải.
Được phân phối nguyên bản thông qua Dịch vụ Google Play, API này giảm tải các tác vụ khôi phục hình ảnh và video đòi hỏi nhiều phép tính trực tiếp cho GPU gốc và Bộ xử lý thần kinh (NPU) của thiết bị lưu trữ. API này cung cấp một quy trình bảo đảm quyền riêng tư, có độ trễ thấp và không có tình trạng APK phình to, chỉ tải các mô hình xuống theo yêu cầu khi cần để tôn trọng dung lượng ổ đĩa của thiết bị.
Các chức năng và trường hợp sử dụng cốt lõi
Khung này nhắm đến các điểm lỗi cụ thể của nội dung nghe nhìn thông qua 3 khả năng chính về học máy mà bạn có thể định cấu hình độc lập hoặc song song:
| Chức năng | Chức năng dựa trên thuật toán | Trường hợp sử dụng ứng dụng tối ưu |
|---|---|---|
| Tonemap | Thuật toán ánh xạ tông màu cục bộ từ SDR sang SDR giúp cải thiện hình ảnh có dải động chuẩn (SDR) để mô phỏng các đặc điểm giống như HDR (chẳng hạn như cải thiện độ tương phản cục bộ và tăng độ sáng cho vùng tối) trong khi vẫn nằm trong dải SDR có thể hiển thị. Thuật toán theo thời gian thực, tiết kiệm năng lượng này được tối ưu hoá cho hiệu suất trên thiết bị di động. | Khôi phục ảnh phong cảnh phẳng, u ám hoặc ảnh chân dung trong nhà bị ngược sáng nghiêm trọng. |
| Khử nhiễu | Tái tạo các cạnh sắc nét bằng cách ước tính hạt nhân làm mờ toán học do chuyển động của chủ thể hoặc rung máy. Áp dụng bộ lọc không gian để làm mịn hạt màu và hoạt động như một bộ lọc giảm khối để giảm thiểu các hiện tượng giả tạo do nén gần các cạnh sắc nét. | Khôi phục ảnh bị rung hoặc mờ, cải thiện ảnh thiếu sáng bị hạt và xoá các hiện tượng khối trong ảnh JPEG và luồng video nén. |
| Cao cấp | Sử dụng mô hình tạo sinh có độ phân giải siêu cao để nhân số lượng pixel và tái tạo các chi tiết có tần số cao bị thiếu. | Mở rộng hình thu nhỏ nhỏ hoặc tệp video có độ phân giải chuẩn để hiển thị toàn màn hình. |
Yêu cầu về phần cứng
Việc chạy suy luận trên thiết bị bằng mô hình học máy hoặc mô hình học sâu sẽ mất thời gian và hiệu suất phần lớn phụ thuộc vào bộ tăng tốc phần cứng mà thiết bị sử dụng. Media Enhancement API được tối ưu hoá cho các thiết bị cấp cao được trang bị lõi tensor chuyên dụng và bộ nhớ băng thông cao (ví dụ: Pixel 10 Pro hoặc Samsung Galaxy S26 Ultra).
Nếu phần cứng của thiết bị không đáp ứng ngưỡng hiệu suất tối thiểu, thì quy trình khởi tạo sẽ dừng và báo cáo trạng thái không được hỗ trợ để ngăn hiện tượng giảm khung hình hoặc điều tiết nhiệt.