Тук е GStreamer 1.28.1 с Whisper‑базиран Speech‑to‑Text и поддръжка за AV1 stateful V4L2 декодери

0
31

Новата версия GStreamer 1.28.1 надгражда януарския ъпдейт от серия 1.28 с поредица от поправки и няколко малки, но значими подобрения. Макар да е точкова версия, актуализацията носи разширена функционалност в ключови модули на мултимедийната рамка.

Основният фокус е върху стабилността, предимно корекции, натрупани през последните седмици, подобряват работата на различни компоненти. Въпреки това разработчиците добавят и нови възможности, които подсилват позициите на GStreamer в областта на обработката на видео, аудио и хардуерно ускорение.

Една от най-интересните новости е елементът за транскрипция, базиран на Whisper. Той позволява автоматично преобразуване на реч в текст, използвайки популярния модел на OpenAI. Интеграцията му в GStreamer отваря врата за по-лесно изграждане на приложения с гласово управление, субтитриране и анализ на аудио съдържание.

Подобрения има и при визуалните компоненти. Коригирани са проблеми при скалирането и оразмеряването на UIView в среди, използващи EAGL и Vulkan, което е важно за приложения под iOS и macOS, работещи с хардуерно ускорение.

Проектът вече включва и под-проект за предоставяне на LunarG MoltenVK SDK за macOS. Това улеснява разработчиците, които използват Vulkan през Metal, и прави екосистемата по-последователна на платформите на Apple.

Видео подсистемата също получава значими подобрения.

  • Кодът за Video4Linux2 вече може да работи със stateful AV1 V4L2 декодери – важна стъпка предвид нарастващото разпространение на AV1.
  • Декодерът и енкодерът на Apple Video Toolbox са обновени, като са добавени и поправки, свързани с tvOS.

Тези промени затвърждават GStreamer като една от най-гъвкавите и активно развивани мултимедийни платформи, способна да се адаптира към нови кодеци, хардуер и работни среди.

Повече подробности можете да научите от официалния сайт.

Прочетете още:  Ubuntu 20.10 идва с още повече ZFS подобрения