Tiiny AI Klaim Superkomputer AI Terkecil di Dunia Dapat Menjalankan Model 120B Parameter di Genggaman Tangan

Tim Editorial BigGo
Tiiny AI Klaim Superkomputer AI Terkecil di Dunia Dapat Menjalankan Model 120B Parameter di Genggaman Tangan

Perlombaan untuk membawa kecerdasan buatan yang kuat keluar dari pusat data dan masuk ke genggaman tangan kita semakin cepat. Meskipun AI berbasis cloud menawarkan kekuatan yang luar biasa, ia datang dengan kompromi dalam hal privasi, latensi, dan biaya. Sebuah pesaing baru, Tiiny AI, telah memasuki arena dengan sebuah perangkat yang membuat klaim yang mengejutkan: sebuah mesin berukuran saku yang mampu menjalankan beberapa model AI sumber terbuka terbesar sepenuhnya secara offline. Artikel ini menyelami spesifikasi, klaim kinerja, dan dampak potensial dari Tiiny AI Pocket Lab, sebuah perangkat yang bertujuan untuk mendefinisikan ulang batas-batas komputasi pribadi dan portabel.

Memperkenalkan Tiiny AI Pocket Lab

Startup asal AS, Tiiny AI, telah meluncurkan Pocket Lab, sebuah perangkat yang dengan berani mereka sebut sebagai "superkomputer AI pribadi terkecil di dunia". Berukuran hanya 14,2 x 8 x 2,53 cm dan dengan berat hanya 300 gram, perangkat ini cukup kecil untuk muat di saku jaket. Meskipun ukurannya kecil, Tiiny AI menegaskan bahwa perangkat ini dapat menerapkan dan menjalankan model bahasa besar (LLM) dengan hingga 120 miliar parameter secara lokal, tanpa koneksi internet sama sekali. Klaim ini telah diakui secara formal, dengan perangkat tersebut menerima Rekor Dunia Guinness untuk "MiniPC Terkecil (100B LLM Lokal)". Perusahaan berencana untuk memamerkan Pocket Lab di pameran dagang CES 2026 di Amerika Serikat.

Spesifikasi Kunci Tiiny AI Pocket Lab

Fitur Spesifikasi
Dimensi 14.2 x 8 x 2.53 cm
Berat 300 gram
CPU 12-core ARMv9.2
Kinerja AI ~190 TOPS (NPU + CPU)
Memori 80GB LPDDR5X
Penyimpanan 1TB SSD
TDP / Daya TDP 30W, sistem ~65W
Klaim Utama Menjalankan LLM 120B-parameter secara lokal
Sertifikasi Rekor Dunia Guinness: MiniPC Terkecil (LLM 100B Lokal)
Acara Pameran CES 2026

Spesifikasi Teknis dan Klaim Kinerja

Inti dari klaim kemampuan Pocket Lab terletak pada konfigurasi perangkat keras kustomnya. Perangkat ini dibangun di sekitar CPU ARMv9.2 12-core yang dipasangkan dengan Unit Pemrosesan Neural (NPU) khusus. Tiiny AI menyatakan kombinasi ini memberikan kinerja komputasi AI sekitar 190 Tera Operasi Per Detik (TOPS). Untuk mendukung kebutuhan memori yang besar dari model-model besar, perangkat ini dilengkapi dengan RAM LPDDR5X 80GB dan SSD 1TB untuk penyimpanan. Mungkin yang paling kritis untuk perangkat portabel, Tiiny AI telah merancang sistem untuk beroperasi dalam Thermal Design Power (TDP) 30W dan total daya sistem tipikal 65W, menjanjikan kinerja tinggi dengan konsumsi energi yang relatif sederhana dibandingkan dengan perangkat keras AI kelas desktop.

Ekosistem Perangkat Lunak dan Model

Perangkat keras hanyalah satu bagian dari persamaan. Pocket Lab dirancang untuk mendukung berbagai LLM dan kerangka kerja sumber terbuka populer dengan penerapan satu klik. Keluarga model yang didukung termasuk Llama dari Meta, model dari Mistral AI, DeepSeek, Qwen, Phi dari Microsoft, dan GPT-OSS. Di luar model inti, perangkat ini juga mendukung kerangka kerja agen dan alat otomatisasi seperti ComfyUI, SillyTavern, dan Flowise. Tiiny AI mengkredit dua teknik perangkat lunak kunci untuk membuat operasi model 120B menjadi praktis: "TurboSparse", metode aktivasi jarang tingkat neuron untuk inferensi yang efisien, dan "PowerInfer", mesin sumber terbuka yang secara dinamis mendistribusikan beban kerja komputasi antara CPU dan NPU.

Model AI & Kerangka Kerja yang Didukung

  • Model Bahasa Besar (LLMs): GPT-OSS, Llama (Meta), Qwen, DeepSeek, Mistral, Phi (Microsoft).
  • Alat & Kerangka Kerja: ComfyUI, SillyTavern, Flowise.
  • Perangkat Lunak Kunci Pendukung: TurboSparse (untuk inferensi efisien), PowerInfer (mesin inferensi heterogen).

Menjawab Kebutuhan Pasar dan Kasus Penggunaan

Tiiny AI memposisikan Pocket Lab sebagai solusi untuk beberapa kekhawatiran yang berkembang di industri AI. Dengan memproses semuanya di perangkat, perangkat ini bertujuan untuk menghilangkan risiko privasi data yang terkait dengan API cloud, karena semua data pengguna dan interaksi model tetap disimpan secara lokal dengan enkripsi tingkat bank. Perangkat ini juga mengatasi masalah latensi dan keandalan yang terkait dengan konektivitas internet. Perusahaan melihat pengguna utamanya sebagai pengembang, peneliti, mahasiswa, dan profesional yang membutuhkan AI portabel dan pribadi untuk tugas-tugas seperti penalaran multi-langkah, pembuatan konten, dan analisis kontekstual mendalam. Mereka berargumen bahwa model dalam rentang parameter 10B hingga 100B mencakup lebih dari 80% kebutuhan AI praktis, sebuah ceruk yang dibangun untuk dilayani oleh Pocket Lab.

Klaim Keunggulan & Posisi Pasar

  • Privasi & Keamanan: Operasi sepenuhnya offline; penyimpanan data lokal dengan enkripsi.
  • Portabilitas: Bentuk faktor saku.
  • Tujuan Kinerja: Bertujuan untuk memberikan kemampuan GPU profesional yang berharga ribuan dolar (misalnya, NVIDIA DGX Spark ~USD 4.000) dengan biaya dan konsumsi daya yang lebih rendah.
  • Target Pengguna: Pengembang, peneliti, profesional, mahasiswa yang membutuhkan AI portabel dan privat.
  • Target Kasus Penggunaan: Penalaran multi-langkah, pembuatan konten, pemahaman kontekstual mendalam (rentang model parameter 10B-100B).

Konteks dan Implikasi Industri

Pengumuman ini datang pada saat "edge AI" menjadi fokus utama industri. Pesaing seperti NVIDIA menawarkan solusi yang kuat namun mahal seperti DGX Spark, yang dapat berharga sekitar 4.000 dolar AS. Pocket Lab, yang harganya belum diungkapkan, menampilkan dirinya sebagai alternatif yang berpotensi lebih terjangkau dan portabel. Jika klaim kinerjanya terbukti benar dalam pengujian dunia nyata, perangkat ini dapat secara signifikan menurunkan hambatan masuk untuk bereksperimen dan menerapkan LLM canggih secara lokal. Pergeseran menuju perangkat keras AI pribadi yang kuat ini dapat memupuk aplikasi baru dan mendemokratisasi akses ke teknologi yang sebelumnya terbatas pada server atau workstation kelas atas.

Menunggu Verifikasi Dunia Nyata

Meskipun spesifikasi dan Rekor Guinness mengesankan di atas kertas, ujian sebenarnya untuk Tiiny AI Pocket Lab akan menjadi tolok ukur kinerja independennya, harga akhir, dan ketersediaan umum—detail yang saat ini masih tertunda. Janji kinerja AI tingkat server dalam perangkat berukuran saku, pribadi, dan offline sangat menarik. Komunitas teknologi akan mengawasi dengan cermat ketika Tiiny AI mendemonstrasikan Pocket Lab di CES 2026 awal tahun depan, ingin melihat apakah superkomputer seukuran saku ini dapat mewujudkan visi ambisiusnya dan menjadi alat transformatif dalam lanskap kecerdasan buatan pribadi yang terus berkembang.