Pripravovaná funkcia stiahnutia v systéme Windows 11 by si mohla „zapamätať“, ku ktorým aplikáciám a obsahu používateľ pristupoval na svojom počítači pred týždňami alebo dokonca mesiacmi, napríklad by im pomohla nájsť chat Discord, kde by diskutovali o oblečení, ktoré uvažovali o kúpe. Používatelia môžu použiť časovú os aplikácie Recall na „posúvanie späť“, aby videli, na čom v nedávnej minulosti pracovali, a ponoriť sa do súborov, ako sú napríklad prezentácie v PowerPointe, aby si mohli pozrieť informácie, ktoré môžu byť relevantné pre ich vyhľadávania.

Microsoft hovorí, že Recall dokáže vytvárať asociácie medzi farbami, obrázkami a ďalšími funkciami, aby používatelia mohli na svojich počítačoch vyhľadávať prakticky čokoľvek v prirodzenom jazyku (nie nepodobné technológii startupu Rewind); Vývojári budú môcť zlepšiť zapamätanie pridaním kontextových informácií do svojich aplikácií. Microsoft tvrdí, že všetky používateľské údaje spojené s Recall zostávajú súkromné ​​a nachádzajú sa v zariadení a nepoužívajú sa na trénovanie modelov AI, čo je dôležité.

tu viac Od spoločnosti Microsoft: „Vaše snímky sú vaše, zostanú lokálne na vašom počítači, môžete odstrániť jednotlivé snímky, upraviť a odstrániť časové rozsahy v nastaveniach alebo pozastaviť kedykoľvek priamo z ikony na paneli úloh filtrovať aplikácie a webové stránky, aby sa nikdy neuložili.

Úprava obrázkov a živé preklady

V systéme Windows je teraz viac AI ako kedykoľvek predtým a niektoré z nich sú exkluzívne pre nové počítače Copilot+.

Nová funkcia s názvom Supersolution dokáže obnoviť staré fotografie automatickým zvýšením ich veľkosti. Copilot teraz dokáže analyzovať obrázky a poskytnúť používateľom nápady na kreatívne kompozície. Prostredníctvom funkcie s názvom Cocreator môžu používatelia vytvárať obrázky a tiež nechať model AI sledovať to, čo kreslia, aby zmenil alebo prepracoval obrázok.

Inde živé prepisy s titulkami prekladajú akýkoľvek zvuk, ktorý prechádza počítačom – či už zo služby YouTube alebo lokálneho súboru – do jazyka podľa výberu používateľa. Živé preklady budú spočiatku podporovať približne 40 jazykov vrátane angličtiny, španielčiny, mandarínčiny a ruštiny.

Samostatná, ale súvisiaca nová funkcia v Microsoft Edge poskytuje preklad videa v reálnom čase na stránkach ako LinkedIn, YouTube, Coursera, Reuters, CNBC, Bloomberg a ďalšie. Táto funkcia, ktorá má byť dostupná v blízkej budúcnosti, podporuje preklad španielčiny do angličtiny, angličtiny do nemčiny, hindčiny, taliančiny, ruštiny a španielčiny a prekladá hovorený obsah prostredníctvom dabingu a živých titulkov.

Druhý pilot a príslušenstvo

Team Copilot je najnovším rozšírením rastúceho portfólia generatívnych technológií AI Copilot spoločnosti Microsoft. Integruje sa s Teams, firemnou aplikáciou na videokonferencie, aby pomohla spravovať agendu schôdzí a robiť si poznámky, ktorých spoluautorom môže byť ktokoľvek na schôdzi. Rozširuje sa na Loop a Planner, platformy na spoluprácu a plánovanie spoločnosti Microsoft, na vytváranie a priraďovanie úloh, sledovanie termínov a upozorňovanie členov tímu, keď je potrebný ich vstup.

V trochu súvisiacich novinkách Copilot spoločnosť Microsoft spustila (v súkromnej ukážke) rozšírenia Copilot, ktoré umožňujú vývojárom rozšíriť vlastný nástroj na generovanie kódu GitHub Copilot GitHub Copilot o aplikácie a zručnosti tretích strán. Spúšťací partneri zahŕňajú DataStax, Docker a LambdaTest; Rozšírenia budú umiestnené na GitHub Marketplace, ale vývojári budú môcť vytvárať aj vlastné rozšírenia na integráciu s ich internými systémami a API.

Runtime Copilot v systéme Windows

Funkcie ako Recall a Supersolution vypínajú funkcie Windows Copilot Runtime, kolekcia asi 40 generatívnych modelov AI, ktoré tvoria to, čo Microsoft popisuje ako „novú vrstvu“ Windowsu. V kombinácii so sémantickým indexom, vektorovým systémom natívnym pre jednotlivé počítače Copilot+, Windows Copilot Runtime umožňuje aplikáciám poháňaným AI – vrátane aplikácií tretích strán – bežať bez toho, aby nevyhnutne vyžadovali internetové pripojenie.

„[The runtime] Pozostáva z AI API pripravených na použitie, ako sú Studio Effects, Live Captions, OCR, Recall s aktivitou používateľa a [more]Davuluri v utorok uviedol, že aplikácia bude pre vývojárov dostupná v júni.

Microsoft hovorí, že CapCut, populárny video editor od vlastníka TikTok ByteDance, použije Windows Copilot Runtime a sprievodnú novú knižnicu Windows Copilot, sadu rozhraní API a vývojových nástrojov AI, na zrýchlenie svojich funkcií AI. Meta pridá vyššie uvedené Studio Effects do WhatsApp, aby ponúkla funkcie ako rozmazanie pozadia a očný kontakt počas videohovorov.

Vylepšite staviteľov robotov

Azure AI Studio, súprava nástrojov v rámci služby Azure OpenAI od spoločnosti Microsoft, ktorá umožňuje zákazníkom kombinovať model AI a vytvárať aplikáciu, ktorá „premýšľa“ o týchto údajoch, čoskoro umožní vývojárom vytvárať aplikácie pomocou odvodňovacích rozhraní API s priebežnými platbami – Rozhrania API, ku ktorým môžu vývojári pristupovať a dolaďovať generatívne modely AI hostené v infraštruktúre Azure. Microsoft to nazýva „model ako služba“ a začína sa s modelmi od Nixtla a Core42.

V susednom balíku produktov Copilot Studio spoločnosť Microsoft uvádza na trh agentov Copilot, ktorých spoločnosť opisuje ako roboty AI, ktoré dokážu „autonómne koordinovať úlohy prispôsobené konkrétnym rolám a funkciám“. (Copilot Studio poskytuje nástroje na prepojenie Copilota pre Microsoft 365, „kopilota“ poháňaného AI v aplikáciách ako Excel a Word, s údajmi tretích strán.) Využitím pamäte a znalostí kontextu môžu agenti Copilot navigovať v rôznych typoch obchodných pracovných tokov, učiť sa Z komentárov používateľov a požiadať o pomoc, keď sa dostanú do situácií, s ktorými si nevedia rady.

Vývojová súprava Snapdragon

Je tu nová vývojová súprava od Qualcommu zameraná na vývojárov, ktorí vytvárajú aplikácie pre počítače Copilot+ vybavené čipmi Arm

Súprava Snapdragon Dev Kit za 899,99 USD pre Windows – ktorá meria približne rovnakú šírku, výšku a dĺžku ako Mac Mini od Apple – obsahuje Snapdragon od Qualcommu a množstvo I/O operácií. Dev Kit podporuje Wi-Fi 7 a Bluetooth 5.4 a prostredníctvom rôznych portov USB-C a HDMI dokáže napájať až tri 4K displeje súčasne.

PHI-3

Microsoft oznámil prírastok do rodiny generatívnych modelov AI Phi, Phi-3-vision, ktorý dokáže vykonávať všeobecnú vizuálnu analýzu a úlohy uvažovania, ako je odpovedanie na otázky o grafoch a obrázkoch. Model dokáže čítať text aj obrázky a je dostatočne efektívny na to, aby sa dal spustiť na mobilnom zariadení.

Phi-3-vision je k dispozícii v ukážke, zatiaľ čo predtým oznámené textové náprotivky tohto modelu – Phi-3-mini, Phi-3-small a Phi-3-medium – sú teraz všeobecne dostupné.

Partnerstvo s Khan Academy

Spoločnosť Microsoft spolupracuje s Khan Academy na darovaní prístupu k infraštruktúre cloud computingu, čo umožňuje Khan Academy poskytnúť pedagógom v Spojených štátoch bezplatný prístup k nástrojom Khan Academy poháňaným AI. Spoločnosť Microsoft v utorok uviedla, že obe spoločnosti budú tiež spolupracovať pri skúmaní príležitostí na zlepšenie aplikácií AI pre výučbu matematiky prostredníctvom generatívnej AI.

Spúšťame newsletter riadený AI! predplatné tu Aby ste ich začali dostávať do vašej schránky 5. júna.