Wkrótce pojawi się zupełnie nowy asystent głosowy Alexa firmy Amazon, obsługiwany przez nową Alexa LLM

Amazon Alexa wkrótce wyjdzie ze swojej skorupy, a to, co się pojawi, może być bardzo interesujące. W środę podczas jesiennej imprezy sprzętowej firma zaprezentowała zupełnie nowego asystenta głosowego Alexa obsługiwanego przez nowy model obsługujący wiele języków Alexa. Według Dave’a Limpa, obecnego starszego wiceprezesa ds. urządzeń i usług firmy Amazon, nowa Alexa może rozumieć frazy konwersacyjne i odpowiednio reagować, skuteczniej interpretować kontekst i realizować wiele żądań za pomocą jednego polecenia.

Asystenci głosowi muszą się zmienić. Ogólny brak innowacji i niezauważalna poprawa zrozumienia sprawiła, że ​​stały się one niezbędnymi narzędziami, a nie ekscytującym postępem technologicznym, na który liczyliśmy, kiedy pojawiły się na scenie ponad dziesięć lat temu.

Od jakiegoś czasu wydaje się, że generatywna sztuczna inteligencja ma największe szanse na przetrwanie. Chociaż ci cyfrowi asystenci zawsze mieli element sztucznej inteligencji, brakuje im możliwości złożonego przetwarzania i interakcji bardziej przypominających ludzi, jakie może generować sztuczna inteligencja. To ważny moment dla inteligentnego domu, ponieważ może przenieść automatyzację domu na wyższy poziom, przenosząc go ze zdalnego sterowania do naprawdę inteligentnego domu.

W wywiadzie z krawędź Przed wydarzeniem Limp wyjaśnił, że nowa Alexa LLM „to naprawdę duży model językowy, który można uogólnić i wysoce zoptymalizowany pod kątem użycia Alexy; tego nie można znaleźć w przypadku Barda, ChatGPT czy czegokolwiek innego”.

Jednak zupełnie nowa Alexa nie zostanie udostępniona wszędzie, wszystkim i jednocześnie. Firma będzie go powoli wdrażać w ramach programu podglądu „w nadchodzących miesiącach” – i tylko w USA. Oczywiste jest, że można wyciągnąć wnioski z błędów popełnionych przez Microsoft i Google oraz że Amazon zachowuje się ostrożnie.

„Łącząc studia MBA ze światem rzeczywistym, chcesz zminimalizować halucynacje — i chociaż uważamy, że mamy odpowiednie systemy, nic nie zastąpi przeniesienia ich do realnego świata” — mówi Limb. Jeśli chcesz otrzymać powiadomienie, kiedy będziesz mógł dołączyć do podglądu, powiedz swojemu urządzeniu Echo: „Alexa, porozmawiajmy”, a Twoje zainteresowanie zostanie zarejestrowane.

Nic dziwnego, że ta supermoc Alexa nie zawsze może być darmowa. Chociaż Alexa w obecnym kształcie pozostanie wolna, Limp powiedział, „pomysł superasystenta, który może ulepszyć Twój inteligentny dom, a co więcej, wykonywać za Ciebie złożone zadania, może zapewnić wystarczające korzyści, że zakończymy ładuję coś.” „. Więc w drodze.

Pierwszą dużą zmianą w nowej Alexie będzie asystent bardziej konwersacyjny, który będzie w stanie zrozumieć więcej z tego, co mówisz, i który będzie wymagał mniej szczegółowych etykiet, aby robić to, o co prosisz. Jest to jeden z najczęstszych powodów frustracji asystentów głosowych — konieczność powtarzania, gdy prosisz ich o zmniejszenie temperatury termostatu lub gdy prosisz o odpowiedź: „Są pewne rzeczy, które mają wspólną nazwę „światła”. Wybierz. unikalne nazwy i ponownie uruchom wyszukiwanie” Po raz 900, kiedy wszystko, czego chcesz, to wiedzieć, gdzie zostawiłeś pilota.

Dzięki nowej Alexie możesz powiedzieć np. „Alexa, jest mi zimno”, a asystent powinien podnieść temperaturę podłączonego termostatu. Lub, jak wyjaśnił Limp: „Powiedz: «Alexa, spraw, aby ten pokój wyglądał jak kolory Seahawk», a ona będzie wiedzieć, w którym pokoju się znajduję i jakie są kolory Seahawk, i wykona te tłumaczenia między interfejsami API”.

Interfejsy API są kluczowe, mówi Limb. „Przekształciliśmy dużą liczbę interfejsów API inteligentnego domu, ponad 200, w nasze MBA”. Dane te, w połączeniu z wiedzą Alexy na temat urządzeń w Twoim domu i pokoju, w którym się znajdujesz, na podstawie tego, z którym głośnikiem Echo rozmawiasz, zapewnią Alexie kontekst niezbędny do bardziej proaktywnego i płynnego zarządzania inteligentnym domem.

To kontekstowe zrozumienie wykracza poza wiedzę, jakimi innymi podłączonymi urządzeniami możesz chcieć sterować, na przykład na potrzeby wnioskowania, kiedy coś zmieni się w Twoim domu. „Jeśli dodasz nowe urządzenie do swojego domu, możesz powiedzieć: «Alexa, włącz nowe światło», a ono będzie wiedziało, jakie jest nowe światło” – wyjaśnia Limb. „To wyjaśni całą tajemnicę, więc jeśli włożysz wtyczkę lub nowe inteligentne światło, łatwiej będzie nim sterować.”

Kolejną nową możliwością jest odpowiadanie na wiele żądań jednocześnie. Nie są to tylko podstawowe rzeczy, które już potrafi (w pewnym stopniu), na przykład „Alexa wyłącza światło i zamyka drzwi”. To jest bardziej zaawansowane. „Możesz powiedzieć: «Alexa, włącz zraszacze, otwórz bramę garażową, wyłącz światła zewnętrzne», a wszystko się wyjaśni” – mówi Limp.

Ta funkcja będzie obejmować tworzenie rutyn w podróży wyłącznie za pomocą głosu – bez konieczności ręcznego programowania w aplikacji Alexa. „Dziś rano przygotowałam taki zestaw dla mojego dziecka, mówiąc po prostu: «Alexa, każdego ranka o 8 rano włączaj światło, włączaj muzykę na pobudkę dla mojego dziecka w jego sypialni i włącz ekspres do kawy»” – Limp mówi. „To może się skomplikować”. Tak niejasne, jak chcesz, i natychmiast, będzie pojawiać się w Twojej aplikacji jako rutyna”.

Na początku funkcja wielu poleceń będzie działać tylko z podzbiorem typów urządzeń, w tym ze światłami, inteligentnymi wtyczkami i niektórymi innymi, mówi Lemp. Zespół pracuje jednak nad dodaniem wszystkiego.

Programiści będą mogli także skorzystać z nowych funkcji poznawczych Alexy i zintegrować swoje produkty i usługi w tym bardziej konwersacyjnym formacie. Amazon oferuje dwa narzędzia, które pozwalają nowej Alexie kontrolować niektóre unikalne funkcje produktów innych producentów, które niekoniecznie znajdują się w zestawie narzędzi ekosystemu inteligentnego domu Amazon. Nazywa się je kontrolerem dynamicznym i kontrolerem akcji.

Kontroler dynamiczny umożliwi funkcjom takim jak wstępnie ustawione sceny kontrolowanie oświetlenia tak, aby wyglądało bardziej naturalnie. Jeśli więc masz kolorowe żarówki GE Cync i powiesz: „Alexa, spraw, żeby wyglądało to strasznie”, Alexa będzie wiedziała, co zrobić, bez konieczności programowania rutyny lub importowania scen do aplikacji Alexa.

Podobnie konsola Akcje umożliwia programistom dodawanie prostych akcji, na których może działać Alexa. Na przykład, jeśli powiesz: „Alexa, podłoga jest brudna”, asystent będzie wiedział, że chcesz, aby robot zaczął odkurzać.

Amazon twierdzi, że współpracuje już nad tymi funkcjami z firmami GE Cync, Philips, GE Appliances, iRobot, Roborock i Xiaomi, a programiści mogą Zarejestruj się teraz, aby poprosić o udział. Blog deweloperski Amazona zawiera więcej szczegółów na temat nowych możliwości i narzędzi.

Limp mówi, że to dopiero początek nowej podróży Alexy. „Stworzyliśmy nowy program LLM AI, który z czasem będzie obsługiwał szereg domen Alexa, w tym szereg nowych funkcji inteligentnego domu” – mówi. „Pierwszy zestaw polega na próbie uproszczenia codziennych zadań”. To, dokąd uda się dalej, będzie interesującą podróżą do oglądania.

Nowy asystent głosowy oparty na technologii Alexa LLM zadebiutuje w wersji zapoznawczej w USA i będzie dostępny dla każdego posiadacza urządzenia Echo. Amazon nie ogłosił daty podglądu, a nowe funkcje inteligentnego domu zasilane przez Alexa LLM będą częścią dodatkowej wersji zapoznawczej dostępnej tylko na zaproszenie. Możesz poprosić o zaproszenie, gdy znajdziesz się w wersji zapoznawczej. Amazon twierdzi, że będzie dostępny później.

Zaktualizowano w czwartek, 21 września o 9:20: Dodano szczegóły dotyczące sposobu, w jaki programiści mogą zarejestrować się w celu integracji swoich urządzeń i usług z Alexa LLM.