Craig Federighi merinci kolaborasi Apple dengan Google untuk Siri AI di iOS 27

Tim Siri Apple, dipimpin oleh Craig Federighi, mengadakan pembicaraan teknologi utama pasca-WWDC dengan anggota pers sore ini untuk membahas tentang iOS 27 dan Siri AI yang baru.

Dalam pembicaraan tersebut, Federighi berbagi lebih detail tentang kolaborasi Apple dengan Google.

Federighi bergabung dengan Amar Subramanya (wakil presiden AI), Mike Rockwell (pimpinan Siri), dan Sebastien Marineau-Mes (VP ​​perangkat lunak).

Mengenai kolaborasi Google, Federighi menjelaskan:

Tentu saja, kami tidak memiliki aplikasi Gemini sebagai aplikasi kami. Faktanya, tidak satu pun kode klien tersebut yang menjadi bagian dari cara kami menjalankannya di iOS. Untuk model ini, kami tidak menggunakan satu pun model yang diterapkan Google kepada pelanggannya, dan kami juga tidak menggunakan infrastruktur dan sarana yang digunakan Google untuk menerapkan model kepada pelanggannya. Lalu, jika menyangkut basis pengetahuan, tentu saja kami tidak menggunakan Google Penelusuran atau semacamnya sebagai fondasi sistem kami. Jadi saya harap itu jelas. Jumlah Asisten Google yang kami gunakan tidak ada.

Jadi mari kita bicara tentang apa yang kita gunakan, atau bagaimana sistem kita dibangun.

Tentu saja, ini dimulai dengan pengalaman Asisten kami. Dan seperti yang Anda lihat sebelumnya hari ini, pengalaman Asisten ini terintegrasi secara mendalam ke dalam sistem, ke dalam iOS, ke dalam iPadOS, ke dalam macOS. Anda melihat di iPhone bagaimana asisten muncul, menurut saya sangat indah, di Liquid Glass dari Dynamic Island, bagaimana Anda dapat memanggilnya dari tombol samping atau dengan mengucapkan nama kepada Siri. Namun lebih dari itu, ini terintegrasi di semua tempat dalam sistem. Jadi, baik Anda menulis dengan Alat Penulisan, mengklik dengan menu konteks, semua ini terintegrasi secara mendalam ke dalam pengalaman sistem.

Sekarang, yang terhubung ke sana adalah aplikasi Siri. Aplikasi Siri adalah cara terbaik untuk kembali ke percakapan yang Anda mulai sebelumnya, untuk melihat apa yang telah Anda lakukan sebelumnya, mungkin memperpanjang percakapan tersebut, atau memulai percakapan baru. Namun aplikasi ini tidak hanya menjangkau beberapa model di cloud. Itu dibangun di atas perangkat lunak sistem yang kuat di Apple Intelligence.

Ini termasuk System Orchestrator, yang merupakan kunci arsitektur privasi seluruh sistem kami. Ini mengoordinasikan permintaan dengan hal-hal seperti App Toolbox yang menyediakan akses ke tindakan dalam aplikasi Anda, Indeks Semantik Spotlight untuk mengakses konten pribadi guna membantu memenuhi permintaan Anda, dan bahkan hal-hal seperti konteks di layar untuk memahami apa yang mungkin Anda lihat saat Anda membuat permintaan.

Hal ini, pada gilirannya, dibangun berdasarkan serangkaian model pada perangkat yang kuat. Ini menangani segalanya mulai dari memahami ucapan hingga mensintesis suara yang membalas Anda, hingga memahami secara visual lingkungan dan konteks di layar, memahami jika ada sesuatu yang relevan di sana, memahami teks yang mungkin ada di layar, serta serangkaian model lainnya.

Dan untuk beberapa permintaan, model mampu memproses permintaan Siri Anda sepenuhnya secara lokal di perangkat. Namun terkadang System Orchestrator menyadari bahwa ini adalah pertanyaan yang lebih canggih, dan kemudian ingin memanfaatkan kecerdasan yang lebih besar. Hal ini dilakukan dengan menghubungi model kami yang berjalan di Private Cloud Compute.

Tujuan dari Private Cloud Compute adalah untuk memperluas janji privasi yang sama dengan iPhone hingga ke cloud, sehingga permintaan Anda sepenuhnya bersifat pribadi untuk Anda. Data tersebut tidak pernah disimpan, tidak pernah dapat diakses oleh siapa pun, termasuk Apple, data tersebut hanya diproses sebagai bagian dari permintaan, dan tidak ada yang dapat mengaksesnya. Semua properti tersebut tidak hanya dibangun secara arsitektur jauh di dalam sistem, namun juga merupakan sesuatu yang dapat terus diverifikasi oleh peneliti pihak ketiga.

Kini, dalam model penerapan tersebut, kami memiliki rangkaian—generasi ketiga—Model Apple Foundation, mulai dari model AFM Cloud dan AFM Cloud Pro hingga model AFM Fusion dan model gambar. Ini adalah model-model yang merupakan produk kolaborasi kami dengan Google, dan Anda akan mendengar lebih banyak tentangnya saat kami melanjutkan. Namun hal tersebut dirancang untuk dijalankan pada arsitektur penerapan kami. Ini adalah model yang dirancang khusus untuk pengalaman Apple Intelligence kami. Merekalah yang mendukung semua yang Anda lihat dalam presentasi utama hari ini.

Terakhir, saat Anda mengajukan permintaan yang melibatkan peristiwa terkini atau elemen pengetahuan dunia lainnya, tanggapan tersebut didasarkan pada akses ke Layanan Pengetahuan Dunia Apple. Ini adalah sesuatu yang kami bangun selama bertahun-tahun dan menyediakan sumber informasi yang bagus untuk memenuhi permintaan Anda.

Jadi sistem inilah yang mendukung seluruh pengalaman Apple Intelligence yang Anda lihat sebelumnya. Saya harap itu menjadi dasar diskusi kita juga. Dan apa yang ingin kami lakukan sekarang adalah menghadirkan anggota tim kepemimpinan yang membantu mengerjakan semua ini.

Subramanya menguraikan:

Kami sangat gembira dengan Apple Foundation Models, atau AFM, generasi ke-3, yang bekerja sama dengan Google. Kami telah membangun serangkaian model yang mencakup perangkat hingga cloud. Sekarang, sebelum saya membahas masing-masing model dalam keluarga ini, yang menjadi judul utama, menurut saya, untuk generasi ini adalah setiap model memiliki kualitas dan kemampuan yang sangat berbeda dibandingkan dengan generasi sebelumnya.

Cukup dengan melihat masing-masing model, kita akan mulai dengan model di perangkat. Jadi pertama-tama, kami memiliki AFM Core. Ini adalah generasi berikutnya dari model pada perangkat yang kami kirimkan pada perangkat saat ini. Ini mengikuti arsitektur yang padat.

Dan selanjutnya, kami memiliki AFM Core Advanced.

Ini berbeda dengan model pada perangkat yang pernah kami jalankan sebelumnya. Ia menggunakan arsitektur yang jarang, yang aslinya multimodal. Dan sebagai hasilnya, lompatan besar dalam kemampuan model ini, memungkinkan beberapa fitur yang Anda dengar pagi ini, seperti undangan dan suara ekspresif, semuanya berfungsi sepenuhnya di perangkat berkat model ini.

Beralih ke model server kami, yang semuanya disajikan dari Private Cloud Compute kami. Pertama, kami memiliki AFM Cloud. Ini adalah model kerja keras server kami. Ini pada dasarnya dioptimalkan untuk latensi dan biaya penayangan.

Dan selanjutnya, kita memiliki AFM Cloud Image. Ini adalah model pembuatan dan pengeditan gambar generasi berikutnya, dan, Anda tahu, memungkinkan sejumlah pengalaman menakjubkan, termasuk hal-hal seperti pembingkaian ulang spasial, yang juga Anda dengar pagi ini.

Dan keempat model yang baru saja kita bicarakan, FM, Core, Core Advanced Cloud, dan Cloud Image, semuanya dibuat khusus untuk Apple Silicon, dilatih menggunakan data kepemilikan, dan disempurnakan menggunakan model perbatasan Gemini.

Terakhir, untuk beberapa tugas yang paling menuntut, seperti penggunaan alat agen, penalaran kompleks, kami memiliki AFM Cloud Pro. Ini adalah model kami yang paling mumpuni dengan kualitas yang mirip dengan model Gemini frontier.

Dan untuk membawa model ini ke produksi, kami bekerja sama dengan Google dan Nvidia untuk memperluas infrastruktur Private Cloud Compute kami ke GPU NVIDIA di cloud Google, sekaligus menjaga jaminan privasi Apple yang tak tertandingi, bukan?

Jadi, di seluruh rangkaian model ini, tujuan kami adalah mencocokkan setiap permintaan pengguna dengan model yang memberikan respons terbaik dengan latensi terendah. Jadi bersama-sama kami sangat gembira dengan model generasi berikutnya ini dan fitur luar biasa yang memungkinkan kami untuk mengembangkannya, termasuk pengalaman Siri AI baru dan semua pengalaman cerdas luar biasa di seluruh OS.

Lebih banyak lagi yang akan datang…

Favorit Chance:

Ikuti Peluang: Utas, Bluesky, Instagram, dan Mastodon.