Apple nie śpieszy się z tym, aby chwalić się w komunikacji, że nowe urządzenia producenta będzie wspierane zaawansowanymi funkcjami AI. Robią to w swoim tempie, ale ostatnio temat ten coraz częściej jest na tapetach mediów.
System operacyjny iOS 18 ma podobno już mieć zaawansowane funkcje wspierane AI i wygląda na to, że może być w tym więcej niż jedno ziarno prawdy, a cały worek faktów. Firma Apple wydała dziś kilka dużych modeli językowych typu open source (LLM), które są przeznaczone do uruchamiania na urządzeniu, a nie za pośrednictwem serwerów w chmurze. Model językowy o nazwie OpenELM (Open-source Efficient Language Models) jest dostępny na Hugging Face Hub.
OpenELM od Apple trafił na platformę Hugging Face Hub
Platforma Hugging Face istniejąca od 2016 roku to miejsce, gdzie użytkownicy udostępniają modele AI, z których mogą korzystać inni programiści. To taki ostatni bastion przed betą i finalną wersją, jaka trafi do urządzeń użytkowników. Apple dostarczyło kod, dzienniki szkoleń i wiele wersji, a nie tylko ostateczny wyszkolony model. Programiści stojący za projektem mają nadzieję, że doprowadzi to do szybszego postępu.
OpenELM, najnowocześniejszy model otwartego języka. OpenELM wykorzystuje warstwową strategię skalowania, aby skutecznie alokować parametry w każdej warstwie modelu transformatora, co prowadzi do zwiększonej dokładności. Na przykład, przy budżecie parametrów wynoszącym około miliarda parametrów, OpenELM wykazuje 2,36% poprawę dokładności w porównaniu do OLMo, wymagając 2 razy mniej tokenów przedtreningowych. Odchodząc od wcześniejszych praktyk, które zapewniają tylko wagę modelu i kod wnioskowania nasza wersja zawiera pełne ramy szkolenia i oceny modelu językowego w publicznie dostępnych zestawach danych, w tym dzienniki szkoleń, wiele punktów kontrolnych i konfiguracje przedtreningowe.
kumunikat prasowy Apple
Czy OpenELM trafi na urządzenia z iOS 18?
Apple nie wprowadził jeszcze tego rodzaju możliwości AI do swoich urządzeń, ale iOS 18 będzie mógł zawierać wiele nowych funkcji AI. Plotki sugerują, że Apple planuje uruchomić swoje duże modele językowe na urządzeniu w celach związanych z prywatnością.
Liczę na to, że na czerwcowym wydarzeniu Apple’a – WWDC 2024 dowiemy się więcej i zdradzone zostaną szczegóły dotyczące wdrożenia OpenELM w urządzeniach producenta.
Źródło: Apple
Grafika wyróżniają wygenerowana przez ideogram.ai
