StorySign pomaga niesłyszącym dzieciom nauczyć się czytać bajki


Huawei's StorySign to inkluzywna inicjatywa, darmowa aplikacja wykorzystująca AI i rozszerzoną rzeczywistość, aby ułatwić naukę niesłyszącym dzieciom

Po wpisaniu na czarną listę firm, z którymi administracja USA zakazuje prowadzenia interesów, Huawei umacnia swoją pozycję jako firma o wielu twarzach. Musiał sprzedać Honor, aby zabezpieczyć swoją przyszłość, a jednocześnie musiał wymyślić się na nowo do pewnego stopnia.

O ile wcześniej, co zrozumiałe, koncentrował się na rynku sprzętu, z wysokiej klasy, ale także niskiej klasy smartfonami, tabletami i komputerami, które cieszą się dobrymi wynikami handlowymi, Huawei pozycjonuje się teraz na Zachodzie jako firma usługowa, z aplikacjami streamingowymi, takimi jak Huawei Video i innymi o szczytnych celach. Jedną z takich aplikacji jest StorySign, projekt, który wykorzystuje wiedzę zgromadzoną przez lata badań i inwestycji w sztuczną inteligencję i rzeczywistość rozszerzoną, aby pomóc osobom niepełnosprawnym prowadzić jak najbardziej normalne życie. "W Huawei naszą misją jest uczynienie świata lepszym miejscem. Wierzymy, że technologia powinna wzbogacać ludzkie życie, a sztuczna inteligencja może poszerzać granice tego, co jest możliwe dla człowieka" - zaczyna firma w oświadczeniu zapowiadającym StorySign.

Czym jest Huawei StorySign

Storysign to projekt, który tak naprawdę sięga 2018 roku, ambitny do tego stopnia, że potrzeba było lat, aby był naprawdę skuteczny. Teraz StorySign osiągnął zadowalający stopień dojrzałości i jest gotowy do pracy z dziećmi niesłyszącymi, aby w czasie rzeczywistym tłumaczyć książki na język migowy.

"Nauka czytania", mówi Huawei, "może być trudna dla każdego dziecka. Dla dzieci niesłyszących może to być prawdziwe wyzwanie. Wiedzieliśmy, że nasza technologia może pomóc otworzyć drzwi do świata książek dla 32 milionów niesłyszących dzieci na całym świecie, przenosząc je w świat wyobraźni, ciekawości i kreatywności."

StorySign to darmowa aplikacja, której celem jest pomoc niesłyszącym dzieciom w doskonaleniu umiejętności czytania poprzez tłumaczenie normalnego tekstu wybranych książek na język migowy w czasie rzeczywistym, a wszystko to dzięki połączeniu sztucznej inteligencji i rozszerzonej rzeczywistości.

Aplikację Huawei StorySign można oczywiście pobrać za darmo ze sklepu Huawei AppGallery, a także z Google Play Store i Apple's App Store.


Jak działa Huawei StorySign

Sposób działania Huawei StorySign można podsumować w kilku krokach. Najpierw dziecko otwiera książkę, którą chce przeczytać, następnie otwiera aplikację StorySign, a na koniec ustawia smartfon tak, aby obramować stronę.

Wtedy Star, wirtualny awatar, tłumaczy słowa podświetlone na ekranie na język migowy. W każdej chwili możesz wstrzymać czytanie i cofnąć się lub przewinąć do przodu w tekście.

Z klasyki literatury pięknej obsługiwanej już przez StorySign są: Your Friend Spotty, This (Not) is a Lion, Three Little Bunnies, Happy Birthday, What a Surprise, Spotty.

"Opracowaliśmy StorySign wspólnie z European Deaf Union, British Deaf Association, Penguin Books, Aardman Animations i innymi partnerami.

Nasza współpraca z Penguin Books pomogła nam ożywić niektóre z najbardziej lubianych historii dla dzieci. Aardman pozwolił nam wykorzystać najnowocześniejszą technologię motion-capture i animacji, aby zapewnić, że mimika i ręce Star idealnie odwzorowują język migowy. W ten sposób stworzyliśmy wirtualną postać animowaną, która jest zabawna i uwielbiana przez dzieci.

Z pomocą Stowarzyszeń Głuchych byliśmy w stanie zrozumieć to wyzwanie i znaleźć rozwiązanie technologiczne, które odmieni życie niezliczonych rodzin. Rozwiązanie, które mamy nadzieję przyczyni się do poprawy nauki dzieci niesłyszących.