W komunikacie Ekipy Holding opisano, że celem projektu jest zautomatyzowane generowanie dubbingu do treści wideo, stworzenie zaawansowanego modelu syntezy mowy zdolnego do odwzorowania indywidualnych cech głosu, takich jak prozodia, tembr, emocje oraz innych aspektów mowy.
Kluczowe jest opracowanie efektywnej architektury Neural Text To Speech, skupienie na dźwiękach specyficznych dla języka obcego i identyfikacja oraz wykorzystanie dostępnych źródeł danych audio i wideo.
Wyliczono, że celem jest „skrócenie czasu potrzebnego na proces dubbingu, zmniejszenie kosztów produkcji filmowej dzięki automatyzacji procesu dubbingu i wprowadzenie innowacji w zakresie usług dubbingu przez zaawansowane technologie NTTS, zapewniając automatyzację procesu dubbingu przy zachowaniu wierności odwzorowania cech oryginalnych głosów”.
W ramach prac zaplanowano m.in. eksperymenty z różnymi metodami syntezy głosu oraz wybór struktury modelu sieciowego
Firma podkreśla, że projekt „odpowiada na potrzeby rynku, takie jak wielojęzyczność, efektywność kosztowa i wysoka jakość dubbingu, przy jednoczesnym zaspokojeniu potrzeb społeczności globalnej w zakresie dostępu do treści multimedialnych w różnych językach”. Natomiast zaproponowana technologia „ma na celu również zmniejszenie zużycia naturalnych zasobów poprzez skrócenie czasu potrzebnego na dubbing i minimalizację odpadów generowanych przez tradycyjne metody dubbingu”.
Ekipa Holding dostała środki od UE
Budżet projektu wynosi 8,03 mln zł, z czego wydatki kwalifikowane to 7,84 mln. Odpowiadają za niego spółka zależna holdingu Ekipa Management pozyskała dofinansowanie w ramach Funduszy Europejskich dla Małopolski 2021-2027. Środki pochodzą z programu „Projekty badawczo-rozwojowe przedsiębiorstw typ B Projekty kompleksowe obejmujące prace B+R z wdrożeniem, współfinansowanego z Europejskiego Funduszu Rozwoju Regionalnego”.
Dofinansowanie wyniesie maksymalnie 3,92 mln zł. Zabezpieczeniem prawidłowej realizacji Umowy jest wystawiony przez Ekipa Management weksel in blanco wraz z deklaracją wekslową na kwotę nie mniejszą niż łączna kwota dofinansowania.
