ข้อกำหนดเกี่ยวกับสื่อ SDV

หน้านี้อธิบายข้อกำหนดด้านฮาร์ดแวร์ กราฟิก อินพุต มัลติมีเดีย และการจำลองเสมือนสำหรับการติดตั้งใช้งาน SDV Media

ข้อกำหนดของระบบ

ข้อกำหนดในส่วนนี้มีผลกับการใช้งานระบบ SDV Media ทั้งหมด ไม่ว่าจะทำงานบนฮาร์ดแวร์โดยตรง (Bare Metal) หรือในสภาพแวดล้อมแบบจำลองเสมือน

หน่วยความจำ

ระบบต้องมีหน่วยความจำอย่างน้อย 2 GB ต่ออินสแตนซ์สื่อ SDV

Application Binary Interface

การติดตั้งใช้งานในอุปกรณ์

  • ต้องเข้ากันได้กับ Android NDK ABI ที่กำหนดไว้อย่างน้อย 1 รายการ
  • หากอินสแตนซ์ระบบปฏิบัติการหรืออิมเมจ VM หลายรายการทำงานในอุปกรณ์เดียวกัน จะต้องใช้ Android NDK ABI เดียวกันในทุกอินสแตนซ์
  • ต้องเข้ากันได้กับแหล่งที่มา (เช่น เข้ากันได้กับส่วนหัว) และเข้ากันได้กับไบนารี (สำหรับ ABI) กับไลบรารีที่จำเป็นแต่ละรายการในรายการต่อไปนี้
  • ต้องทำให้ไลบรารีต่อไปนี้ทั้งหมดซึ่งมี API แบบเนทีฟพร้อมใช้งานสำหรับแอป Software Defined Vehicle (SDV)

    • libc (ไลบรารี C)
    • libdl (Dynamic Linker)
    • libdrm.so (ไลบรารีพื้นที่ผู้ใช้ Direct Rendering Manager)
    • libgbm.so (การจัดการบัฟเฟอร์ทั่วไป)
    • libEGL.so (การจัดการแพลตฟอร์ม OpenGL แบบเนทีฟ)
    • libGLESv1_CM.so (OpenGL ES 1.x)
    • libGLESv2.so (OpenGL ES 2.0)
    • libGLESv3.so (OpenGL ES 3.x)
    • liblog (การบันทึก Android)
    • libtinyalsav2.so (การบันทึกและเล่นเสียง)
    • libvulkan.so (Vulkan)
  • ต้องไม่เพิ่มหรือนำฟังก์ชันสาธารณะสำหรับไลบรารีแบบเนทีฟก่อนหน้าออก

  • ต้องจัดเตรียมการติดตั้งใช้งานเฉพาะฮาร์ดแวร์หรือเฉพาะไฮเปอร์ไวเซอร์อย่างเคร่งครัดผ่านโมดูลเคอร์เนลของผู้ให้บริการที่เป็นไปตาม GKI (vendor_boot หรือ vendor_dlkm) และแบ็กเอนด์ /vendor สำหรับเคอร์เนล Linux มาตรฐานและ API พื้นที่ผู้ใช้ในหน้านี้ (โดยไม่แนะนำ HAL ของ Android) และต้องไม่แก้ไขพาร์ติชัน /system, /system_ext หรือ /product หรือลบล้างแพ็กเกจ APEX ของระบบหรือผลิตภัณฑ์จาก /vendor

  • ต้องส่งออกสัญลักษณ์ฟังก์ชัน OpenGL ES 3.1 และ Android Extension Pack ทั้งหมดตามที่กำหนดไว้ใน NDK ผ่านไลบรารี libGLESv3.so โปรดทราบว่าแม้ว่าสัญลักษณ์ทั้งหมดจะต้องปรากฏอยู่ แต่ OpenGL ES จะอธิบายข้อกำหนดโดยละเอียดเพิ่มเติมเมื่อคาดว่าจะมีการใช้งานฟังก์ชันที่เกี่ยวข้องแต่ละฟังก์ชันอย่างเต็มรูปแบบ

  • ต้องส่งออกสัญลักษณ์ฟังก์ชัน Vulkan 1.1 หลัก รวมถึงส่วนขยาย VK_KHR_surface, VK_KHR_swapchain, VK_KHR_maintenance1 และ VK_KHR_get_physical_device_properties2 ผ่านไลบรารี libvulkan.so โปรดทราบว่าแม้ว่าสัญลักษณ์ทั้งหมดจะต้องปรากฏอยู่ แต่ Vulkan จะอธิบายรายละเอียดเพิ่มเติมเกี่ยวกับข้อกำหนดเมื่อคาดว่าจะมีการใช้งานฟังก์ชันที่เกี่ยวข้องแต่ละฟังก์ชันอย่างเต็มรูปแบบ

  • ควรสร้างโดยใช้ซอร์สโค้ดและไฟล์ส่วนหัวที่มีอยู่ในโครงการโอเพนซอร์ส Android ต้นทาง

กราฟิกและการแสดงผล

  • การติดตั้งใช้งานอุปกรณ์ต้องแสดงไปป์ไลน์การแสดงผลผ่านอินเทอร์เฟซเคอร์เนล Linux DRM/KMS มาตรฐาน (/dev/dri/card*, /dev/dri/renderD*) ที่รองรับการตั้งค่าโหมดอะตอมผ่าน libdrm.so
  • การติดตั้งใช้งานอุปกรณ์ต้องรองรับการจัดสรรบัฟเฟอร์และการนำเข้าและส่งออกตัวบอกไฟล์ dma-buf แบบ Zero-Copy ผ่าน libgbm.so ใน DRM/KMS, EGL/OpenGL ES, Vulkan และ Video4Linux
  • หากระบบทำงานในสภาพแวดล้อมแบบจำลอง ขอแนะนำให้ใช้ virtio-gpu (ร่วมกับ gfxstream) สำหรับกราฟิกและการแสดงผลที่เร่งฮาร์ดแวร์

อินพุต

  • การติดตั้งใช้งานอุปกรณ์ต้องแสดงอุปกรณ์อินพุตผ่านระบบย่อยอินพุต Linux มาตรฐาน (evdev, /dev/input/event*)
  • การติดตั้งใช้งานอุปกรณ์ควรรองรับอินพุตจากตัวชี้ ปุ่ม และปุ่มหมุนควบคุม
  • หากระบบทำงานในสภาพแวดล้อมแบบจำลอง ขอแนะนำอย่างยิ่งให้ส่งต่อเหตุการณ์อินพุตจากระบบโฮสต์โดยใช้ virtio-input

OpenGL ES

การติดตั้งใช้งานในอุปกรณ์

  • ต้องระบุเวอร์ชัน OpenGL ES ที่รองรับ (1.1, 2.0, 3.0, 3.1, 3.2) อย่างถูกต้องผ่าน Native API
  • ต้องรองรับ API แบบเนทีฟที่เกี่ยวข้องทั้งหมดสำหรับ OpenGL ES ทุกเวอร์ชันที่รองรับ
  • ต้องรองรับทั้ง OpenGL ES 1.1 และ 2.0
  • แนะนำอย่างยิ่งให้รองรับ OpenGL ES 3.1
  • ควรรองรับ OpenGL ES 3.2
  • ต้องรายงานโดยใช้ API ที่มีการจัดการของ OpenGL ES และ API แบบเนทีฟของส่วนขยาย OpenGL ES อื่นๆ ที่ได้ติดตั้งใช้งาน และในทางกลับกัน ต้องไม่รายงานสตริงส่วนขยายที่ไม่รองรับ
  • ต้องรองรับส่วนขยายต่อไปนี้
    • EGL_EXT_image_dma_buf_import
    • EGL_EXT_image_dma_buf_import_modifiers
    • EGL_KHR_fence_sync
    • EGL_KHR_image_base
    • EGL_KHR_wait_sync
    • GL_OES_EGL_image

เราขอแนะนำเป็นอย่างยิ่งให้ติดตั้งใช้งานอุปกรณ์เพื่อติดตั้งใช้งาน OpenGL ES โดยใช้ไลบรารี ANGLE กับแบ็กเอนด์ Vulkan

Vulkan

การติดตั้งใช้งานในอุปกรณ์

  • ขอแนะนำอย่างยิ่งให้รองรับ Vulkan 1.3
  • ต้องไม่รองรับเวอร์ชันตัวแปร Vulkan (นั่นคือ ส่วนตัวแปรของเวอร์ชันหลัก Vulkan ต้องเป็น 0)
  • ต้องรองรับส่วนขยายต่อไปนี้
    • VK_ANDROID_external_memory_android_hardware_buffer
    • VK_EXT_external_memory_dma_buf
    • VK_EXT_queue_family_foreign
    • VK_KHR_external_memory_fd
    • VK_KHR_external_semaphore_fd

ความเข้ากันได้ของมัลติมีเดีย

  • การติดตั้งใช้งานอุปกรณ์ต้องอนุญาตให้เล่นเนื้อหาเสียงดิบที่มีลักษณะต่อไปนี้

    • รูปแบบแหล่งที่มา: Linear PCM, 16 บิต, 8 บิต, Float
    • ช่องสัญญาณ: โมโน, สเตอริโอ, การกำหนดค่าแบบหลายช่องสัญญาณที่ถูกต้องซึ่งมีช่องสัญญาณสูงสุด 8 ช่อง
    • อัตราการสุ่มตัวอย่าง (หน่วยเป็น Hz):
      • 8000, 11025, 16000, 22050, 24000, 32000, 44100, 48000 ในการกำหนดค่าช่องที่ระบุไว้ก่อนหน้านี้
      • 96000 ในโมโนและสเตอริโอ
  • การติดตั้งใช้งานอุปกรณ์ต้องอนุญาตให้บันทึกเนื้อหาเสียงดิบได้ การใช้งานอุปกรณ์ต้องรองรับลักษณะต่อไปนี้เป็นอย่างน้อย

    • รูปแบบ: Linear PCM, 16 บิต
    • อัตราการสุ่มตัวอย่าง: 8000, 11025, 16000, 44100, 48000 Hz
    • ช่องสัญญาณ: โมโน
  • การติดตั้งใช้งานอุปกรณ์ควรอนุญาตให้บันทึกเนื้อหาเสียงดิบที่มีลักษณะต่อไปนี้

    • รูปแบบ: Linear PCM, 16 บิตและ 24 บิต
    • อัตราการสุ่มตัวอย่าง: 8000, 11025, 16000, 22050, 24000, 32000, 44100, 48000 Hz
    • ช่อง: จำนวนช่องเท่ากับจำนวนไมโครโฟนในอุปกรณ์
  • การติดตั้งใช้งานอุปกรณ์ต้องรองรับการเล่นและการบันทึกเสียงผ่าน libtinyalsav2.so API ที่สนับสนุนโดยอินเทอร์เฟซเคอร์เนล ALSA API ของ Linux มาตรฐาน (/dev/snd/*) หากระบบทำงานในสภาพแวดล้อมแบบจำลอง ขอแนะนำอย่างยิ่งให้ใช้ virtio-sound สำหรับการเข้าถึงฮาร์ดแวร์เสียง

  • โปรแกรมเปลี่ยนไฟล์และโปรแกรมถอดรหัสวิดีโอต้องรองรับรูปแบบสี YUV420 8:8:8 แบบระนาบหรือกึ่งระนาบอย่างน้อย 1 รูปแบบ

  • โปรแกรมถอดรหัสและโปรแกรมเปลี่ยนไฟล์วิดีโอต้องรองรับตัวแปลงรหัส H.264 AVC

  • การติดตั้งใช้งานอุปกรณ์ต้องรองรับโปรไฟล์หลัก H.264 ระดับ 3.1 และโปรไฟล์พื้นฐาน การรองรับการจัดลำดับสไลซ์ตามใจชอบ (ASO), การจัดลำดับมาโครบล็อกแบบยืดหยุ่น (FMO) และสไลซ์ซ้ำซ้อน (RS) เป็นแบบไม่บังคับ

  • โปรแกรมเปลี่ยนไฟล์วิดีโอ:

    • ต้องรองรับโปรไฟล์การเข้ารหัสวิดีโอความละเอียดมาตรฐาน (SD) ในตารางต่อไปนี้
    • ควรรองรับโปรไฟล์การเข้ารหัสวิดีโอความละเอียดสูง (HD) ตามที่ระบุไว้ในตารางต่อไปนี้

      SD (คุณภาพต่ำ) SD (คุณภาพสูง) HD 720p HD 1080p
      ความละเอียดวิดีโอ 320 x 240 พิกเซล 720 x 480 พิกเซล 1280 x 720 พิกเซล 1920 x 1080 พิกเซล
      อัตราเฟรมวิดีโอ 20 FPS 30 FPS 30 FPS 30 FPS
      อัตราบิตของวิดีโอ 384 Kbps 2 Mbps 4 Mbps 10 Mbps
  • ตัวถอดรหัสวิดีโอ:

    • ต้องรองรับโปรไฟล์การถอดรหัสวิดีโอ HD 720p ในตารางต่อไปนี้
    • ต้องรองรับโปรไฟล์การถอดรหัสวิดีโอ HD 1080p ในตารางต่อไปนี้

      SD (คุณภาพต่ำ) SD (คุณภาพสูง) HD 720p HD 1080p
      ความละเอียดวิดีโอ 320 x 240 พิกเซล 720 x 480 พิกเซล 1280 x 720 พิกเซล 1920 x 1080 พิกเซล
      อัตราเฟรมวิดีโอ 30 FPS 30 FPS 60 FPS 30 FPS
      อัตราบิตของวิดีโอ 800 Kbps 2 Mbps 8 Mbps 20 Mbps
  • การติดตั้งใช้งานอุปกรณ์ต้องรองรับตัวแปลงรหัสสื่อ ตัวถอดรหัสวิดีโอฮาร์ดแวร์ ตัวเข้ารหัสวิดีโอฮาร์ดแวร์ และกล้องวิดีโอผ่านโหนดอุปกรณ์เคอร์เนล Linux Video4Linux (V4L2) มาตรฐาน (/dev/video*) ที่รองรับตัวบอกไฟล์เคอร์เนลที่สำรวจได้ และโหมดบัฟเฟอร์ MMAP และ DMABUF (ต้องไม่ใช้ชิมการสกัดกั้นตัวบอกไฟล์พื้นที่ผู้ใช้)

  • โปรแกรมเปลี่ยนไฟล์วิดีโอและรูปภาพที่เร่งฮาร์ดแวร์ทั้งหมดต้องรองรับเฟรมการเข้ารหัสจากกล้องฮาร์ดแวร์

  • หากระบบทำงานในสภาพแวดล้อมเสมือนจริง ขอแนะนำอย่างยิ่งให้ให้สิทธิ์เข้าถึงฮาร์ดแวร์สำหรับการเข้ารหัสวิดีโอ การถอดรหัส และกล้องผ่าน virtio-media

การจำลองเสมือนและระบบโฮสต์

หากระบบทำงานในสภาพแวดล้อมแบบจำลอง ข้อกำหนดในส่วนนี้จะมีผลกับระบบโฮสต์และสภาพแวดล้อมไฮเปอร์ไวเซอร์

ระบบเสมือน

  • หากระบบทำงานในสภาพแวดล้อมแบบจำลองเสมือน นอกเหนือจากอุปกรณ์ VirtIO ที่โปรไฟล์หลักแนะนำแล้ว เราขอแนะนำอย่างยิ่งให้จัดหาอุปกรณ์ VirtIO ต่อไปนี้ในระบบโฮสต์
    • virtio-gpu: สำหรับ GPU เสมือนและการแสดงผล
    • virtio-input: สำหรับการส่งต่อเหตุการณ์อินพุต (เช่น การแตะ แป้นพิมพ์)
    • virtio-sound: สำหรับอุปกรณ์เสียงเสมือน
    • virtio-media: สำหรับตัวแปลงรหัสวิดีโอเสมือนและอุปกรณ์กล้อง

อินพุต

  • หากระบบทำงานในสภาพแวดล้อมแบบจำลองเสมือน ขอแนะนำอย่างยิ่งให้ส่งต่อเหตุการณ์อินพุตจากระบบโฮสต์ไปยังระบบเกสต์โดยใช้ virtio-input