Meta Connect 2024: AR-көзілдірік Orion, Quest 3S және LLaMA 3.2 — басты жаңалықтар

Meta Connect 2024 — бұл әзірлеушілерге арналған жыл сайынғы іс-шара, онда бас директор Марк Цукерберг компанияның жасанды интеллект пен метавселені дамытуға бағытталған аппараттық және бағдарламалық қамтамасыз ету саласындағы ең жаңа әзірлемелерін таныстырады. Биыл Meta көптеген инновацияларды, соның ішінде Llama ИИ-моделінің жаңартуларын, толықтырылған шынайылықты (AR) толық қолдайтын көзілдірік прототипін және, әрине, Quest пен AR-көзілдіріктері Orion-ды көрсетті.

AR-очки Orion

Компания Meta презентовала свои новые очки дополненной реальности под названием Orion. Разработка этих очков длилась пять лет, и теперь они представляют собой одно из самых передовых решений на рынке. Orion выглядят как обычные очки, но имеют встроенные функции AR, позволяя накладывать цифровые элементы на реальный мир и взаимодействовать с ними.

Ерекшеліктері мен технологиялары


Көзілдірік Micro LED-проекторлары бар дисплейлермен жабдықталған, олар суретті линзаларға толқын өткізгіштері арқылы проекциялайды. Бұл кең көру алаңын — 70° қамтамасыз етеді, бұл қазіргі AR-құрылғылары арасындағы ең жақсы көрсеткіштердің бірі. Orion жеңіл (98 грамм) және үйде де, сыртта да қолдануға ыңғайлы.
Құрылғыда Meta AI жасанды интеллектісі қолданылады, ол қоршаған ортаға бейімделіп, пайдаланушыларға тоңазытқыштағы заттарға рецепттер құрастыруға немесе сөйлеуді нақты уақыт режимінде аударуға көмектеседі. Көзілдірікті басқару көзқарасты, дауысты және нейронды білезік арқылы қимылдарды қадағалау арқылы жүзеге асырылады.

Кімдерге және қашан

Қазіргі уақытта Orion құрылғысын Meta қызметкерлері мен таңдаулы пайдаланушылар тестілеуден өткізуде, бірақ компания құрылғыны жетілдіріп, оның құнын төмендетіп, жаппай шығаруды жоспарлап отыр. Нарыққа шығу күні әлі нақты белгіленбеген, алайда ағып кеткен ақпараттар 2027 жылы релиз болуы мүмкін екенін көрсетеді.

Quest 3S гарнитурасы


Meta Quest 3-тің қолжетімді нұсқасын шығару туралы қауесеттерді растап, құрылғыны 128 ГБ нұсқасы үшін 299 доллар және 256 ГБ нұсқасы үшін 399 доллардан басталатын бағамен ұсынды. Толығымен сымсыз гарнитура Quest-тің қолданыстағы қолданбалары мен ойындарын қолдайды, сондай-ақ аралас шынайылық мүмкіндіктеріне ие, бұл оны кең аудиторияға тартымды етеді.

Негізгі сипаттамалары Quest 3S:

Процессор: Qualcomm Snapdragon XR2 Gen 2, Quest 3-тің жоғары нұсқасындағыдай.

Шешімі: әр көзге 1920x1832 пиксель, Quest 2-ге ұқсас.

Көру бұрышы: 96-ға 90 градус.

Жұмыс уақыты: бір зарядпен 2,5 сағатқа дейін.

Осы сипаттамаларға қосымша, Quest 3S Френель линзаларымен жабдықталған, бұл кескін сапасын жақсартады, сондай-ақ сурет режимдерін жылдам ауыстыруға мүмкіндік беретін жаңа «Әрекет түймесі» бар. Гарнитура көз бен қол қозғалыстарын қадағалау технологияларын қолдайды, бұл виртуалды шынайылықпен дәлірек әрекеттесуге мүмкіндік береді.

Meta экожүйесінің жаңа мүмкіндіктері:

Remote Display — контентпен жұмыс істеу үшін Windows 11 орнатылған ДК-ге қосылу мүмкіндігі.

Метағарыштағы фотореалистік кеңістіктер — енді пайдаланушылар өз кеңістіктерін құра алады және сканерлей алады.

Horizon Worlds жаңартулары — виртуалды әлемдер арасында ауысуға арналған порталдар қосылды.

Нативті ойындар мен қосымшалар — Batman, Just Dance, Supernatural фитнеске арналған және басқа да көптеген қосымшалар.

Quest 3S алдын ала тапсырыс беру мүмкіндігі ашылды, ал ресми сатылымы 15 қазанда басталады. Осы модельдің шығуына байланысты Quest 3-тің бағасы 499 долларға дейін төмендетіледі. Сондай-ақ, Meta Quest 2 және Quest Pro сатылымын тоқтату туралы жариялады, олар жыл соңына дейін немесе қойма таусылғанша қолжетімді болады.

Meta және Ray-Ban смарт-көзілдіріктерді жаңа жасанды интеллект (ЖИ) функцияларымен жаңартты

Ray-Ban Meta эволюциясын жалғастырып, құрылғымен әрекеттесуді жаңа деңгейге көтеретін маңызды жаңартуларға ие болды. Көзілдіріктер енді қосымша ЖИ функцияларымен жабдықталған, бұл оларды күнделікті қолдануға қолайлы әрі функционалды етеді.

Негізгі жаңартулар:


Дауыстық әрекеттесу оңайырақ болды. Енді пайдаланушылар қысқа сөйлемдерді және табиғи тілді қолдана алады. Мысалы, әрбір әрекетті «Hey, Meta» деп бастау қажет емес — бір рет пәрменді қосып, әрі қарай сұхбатты жалғастыра беруге болады.

Контекстік әрекеттер: көзілдірік сіз көрген нәрсеге негізделген ақпаратты есте сақтай алады. Мысалы, тек көлік тұрағына қарап, құрылғыдан оны есте сақтауды сұрау жеткілікті. Немесе хабарландыруды қарау кезінде бірден көзілдіріктен телефон нөміріне қоңырау шалуды немесе QR кодын сканерлеуді сұрауға болады.

Бейне-мультимодальдық: көзілдірік нақты уақыт режимінде бейнені талдау мүмкіндігіне ие болды. Бұл олардың тек суреттер түсіріп қана қоймай, бейнені талдап, сол сәтте ақпарат беретінін білдіреді. Марк Цукерберг бұл функцияның әлі басында екенін және оның сапасы жақсаратынын атап өтті.

Шынайы сөйлеу аудармасы: көзілдірік естіген сөздерді нақты уақыт режимінде аударады, сондай-ақ сіздің сөзіңізді басқа тілде дыбыстай алады. Демонстрацияда Цукерберг испан тілінде сөйлейтін UFC чемпионы Брэндон Мореномен ағылшын тілінде сөйлесіп, аударманың қаншалықты оңай орындалатынын көрсетті.

Be My Eyes серіктестігі: бұл қосымша зағип немесе көру қабілеті бұзылған адамдарды әртүрлі жағдайларда оларға көмектесетін еріктілермен байланыстырады.

Сонымен қатар, Meta серіктестерінен әртүрлі линза түрлері — рецепт бойынша, оптикалық, фотохромдық және күннен қорғайтын линзалар ұсынылды. Meta сондай-ақ мөлдір жақтаулы көзілдіріктердің шектеулі сериясын шығаруды жариялады.

Танымал сервистермен интеграциялар:

Музыканы басқару: жақын арада пайдаланушылар Spotify және Amazon Music сияқты сервистерді тек дауыс арқылы басқара алады.

Жаңа қосымшалар: жақында Audible және iHeart Radio интеграциялары пайда болады, бұл көзілдірікті пайдалануды одан да әмбебап етеді.

Meta AI жаңартулары
Meta Connect 2024 көрмесінде компания өзінің AI-ассистентінің айтарлықтай жаңартуларын жариялады, ол енді Instagram, WhatsApp және Messenger сияқты танымал қосымшалармен интеграцияланған. Meta AI ай сайын 500 миллионнан астам белсенді пайдаланушылармен қолданылады, енді жаңа мүмкіндіктердің арқасында жасанды интеллектпен әрекеттесу әлдеқайда ыңғайлы және табиғи болады.

Meta AI негізгі жаңартулары:


LLaMA 3.2 пайдалану: ассистенттің негізінде енді жаңа LLaMA 3.2 моделі жұмыс істейді, ол жасанды интеллекттің жылдамдығы мен ақылдығын арттырады. Сондай-ақ, ол мультимодальді болып, ассистентке суреттерді тану және талдау мүмкіндігін береді, бұл оны GPT-4 сияқты жетілдірілген модельдер қатарына қосады.

Дауыстық әрекеттесу: енді пайдаланушылар ассистентке тек мәтін арқылы ғана емес, дауыс арқылы да сұрақ қоя алады. Meta AI бірнеше дауыстарды қолдайды, олардың арасында Джон Сина, Джуди Денч, Кристен Белл және Киган-Майкл Ки сияқты танымал тұлғалардың дауыстары бар, бұл әрекеттесуді интерактивті және бірегей етеді.

Meta AI Translation: автоматты дубляж функциясы рилстерді нақты уақыт режимінде басқа тілге аударуға мүмкіндік береді, бұл халықаралық байланыстарды қарапайым және қолжетімді етеді.

Визуалды іздеу және редакциялау: Meta AI енді суреттерге негізделген сұрауларға жауап беріп, тіпті фотосуреттерді өңдей алады. Бұл контент жасауды және оны Instagram Stories-ке интеграциялауды жеңілдетеді.

Жаңа ассистент мүмкіндіктерінен басқа, Meta AI Studio құралы ұсынылды — бұл құрал әзірлеушілер мен компанияларға өз қажеттіліктеріне қарай ассистенттерді баптауға мүмкіндік береді.

Бұл жаңалықтар Meta AI-ды жай ғана пайдалы құрал емес, технологиялар мен контентпен әрекеттесудің ережелерін өзгертетін әмбебап цифрлық көмекшіге айналдырады.

LLaMA 3.2: жаңа буын мультимодальді AI-моделдері
Meta Connect 2024 көрмесінде Meta өзінің жаңа көптілді AI-модельдерінің нұсқасы — LLaMA 3.2-ні жариялады. Олар енді мультимодальді мүмкіндіктерді қолдайды, яғни бұл модельдер тек мәтінмен жұмыс істеп қана қоймай, суреттер, диаграммалар және графиктер сияқты визуалды деректерді интерпретациялай алады, бұл олардың қолданылу аясын кеңейтеді.

LLaMA 3.2 негізгі ерекшеліктері:

Мультимодальдік: енді модельдер тек мәтінді оқып, генерациялап қана қоймай, суреттерді де талдай алады. Мысалы, олар суреттерге сипаттама бере алады, нысандарды сипаттама бойынша анықтайды, диаграммалар мен графиктерді талдай алады. Бұл модельмен әрекеттесуді икемдірек және әмбебап етеді.

Параметрлер санының артуы: LLaMA 3.2 11 және 90 миллиард параметрлері бар нұсқаларда ұсынылған, бұл алдыңғы нұсқасымен (LLaMA 3.1) салыстырғанда айтарлықтай жетілдіру (онда 8 және 70 миллиард параметр болған).

Қолдану мысалдары: LLaMA 3.2 картаға талдау жасап, соқпақ жолдың ұзындығы немесе жер бедерінің күрделілігі туралы ақпарат бере алады. Модель сондай-ақ, графиктерді жылдам бағалай алады, мысалы, компанияның кірісі бойынша ең табысты айларды анықтайды.

Meta сондай-ақ LLaMA 3.2 модельдерін компанияның толықтырылған шынайылық көзілдіріктерінде іске қосу мүмкіндігі туралы хабарлады, бұл олардың функционалдығын айтарлықтай кеңейтеді. Бұл жаңалықтар LLaMA 3.2-ні мәтіндік және визуалды ақпаратты өңдеуге арналған қуатты құралға айналдырады, пайдаланушыларға деректерді жылдам әрі дәл талдауға көмектеседі.

TSARKA қолдауымен