Santander Gandeng Nvidia: Pangkas Biaya Interaksi AI dari €5 ke €0,03 Lewat Model Kecil Khusus

aiSumber Primer

Banco Santander menjalin kemitraan strategis tiga tahun dengan Nvidia untuk memigrasikan beban kerja perbankan dari LLM raksasa ke Small Language Models (SLM) ter-fine-tune, memangkas biaya per interaksi dari €5 ke €0,03 via platform Model Arena dan Dynamo-Triton.

tv
Redaksi tveniu
Divisi Analisis & Riset
Santander Gandeng Nvidia: Pangkas Biaya Interaksi AI dari €5 ke €0,03 Lewat Model Kecil Khusus

Salah satu grup perbankan terbesar di Eropa, Banco Santander, resmi menandatangani perjanjian kemitraan strategis berdurasi tiga tahun dengan Nvidia. Aliansi ini dirancang untuk mengakselerasi adopsi kecerdasan buatan skala penuh di seluruh divisi perbankan ritel, korporasi, manajemen risiko, serta layanan nasabah grup Santander di pasar Eropa dan Amerika.

Langkah ini menandai pergeseran arsitektur mendasar dalam strategi kecerdasan buatan institusi keuangan global: beralih dari ketergantungan pada model bahasa besar (LLM) serbaguna bernilai miliaran parameter yang mahal menuju pemanfaatan model bahasa kecil khusus (Small Language Models / SLM) yang dioptimalkan secara presisi menggunakan data internal bank.

Penurunan Biaya dari €5 ke €0,03: Terobosan Ekonomi Komputasi Inferensi

Selama fase eksplorasi awal, industri perbankan kerap terbentur oleh tingginya biaya inferensi komputasi awan. Menjalankan model frontier umum melalui API pihak ketiga untuk melayani puluhan juta pertanyaan nasabah menghasilkan biaya token yang tidak ekonomis. Dalam pengujian terkontrol yang dilakukan oleh Santander AI Lab, biaya per interaksi menggunakan model umum mencapai sekitar €5 (sekitar Rp85.000).

Dengan beralih ke model kecil terbuka (open-weight SLM) yang disesuaikan untuk tugas-tugas perbankan spesifik dan dieksekusi pada infrastruktur terakselerasi Nvidia, Santander berhasil memangkas biaya per interaksi menjadi hanya sekitar €0,03 (sekitar Rp500)—penurunan biaya lebih dari 99%. Pada pengujian layanan nasabah operasional, efisiensi biaya tercatat melampaui 50% sembari mempertahankan, bahkan meningkatkan, akurasi dan kepatuhan jawaban.

Model Arena: Platform Evaluasi Mandiri dan Simulasi Agen Perbankan

Inti dari keberhasilan arsitektur Santander adalah 'Model Arena', sebuah platform evaluasi internal yang dikembangkan oleh laboratorium AI Santander. Platform ini bertindak sebagai tolok ukur (benchmark) internal untuk membandingkan puluhan model fondasi open-weight pada studi kasus perbankan nyata—mulai dari analisis skor kredit, interpretasi regulasi keuangan, hingga sintesis riwayat transaksi.

Kini, Model Arena diperluas menjadi lingkungan simulasi lengkap untuk merancang, menguji, dan memantau agen otonom (AI agents). Agen percakapan diuji secara ketat dalam lingkungan 'kotak pasir' (sandbox) virtual untuk memastikan model tidak berhalusinasi atau memberikan rekomendasi finansial keliru sebelum dideploy ke nasabah langsung.

Tumpukan Teknologi Nvidia: NeMo Customizer, Kumo & Dynamo-Triton

Kerja sama tiga tahun ini memanfaatkan tumpukan perangkat lunak canggih Nvidia secara terintegrasi:

Poin Kunci & Temuan
  • Nvidia NeMo Customizer: Digunakan oleh insinyur machine learning Santander untuk melakukan fine-tuning, domain adaptation, dan alignment (RLHF) pada bobot model per domain tugas perbankan.
  • Kumo Foundation Models: Lini model fondasi open-weight mutakhir khusus data tabular dan grafik terstruktur, dipakai Santander untuk analisis prediktif pada proses inti seperti pencegahan fraud dan penipuan transaksi.
  • Dynamo-Triton Serving Engine: Server inferensi berkinerja tinggi yang mengelola continuous batching dan paralelisasi tensor. Santander menyebut arsitektur serving inilah yang paling berkontribusi langsung pada pemangkasan biaya komputasi hingga ke level €0,03 per permintaan.

“Dalam penerapan AI skala institusi keuangan, ukuran model bukanlah penentu utama kesuksesan. Metrik paling krusial adalah efisiensi biaya per hasil yang akurat. Kombinasi model kecil khusus dan data internal membuktikan bahwa AI perbankan dapat beroperasi secara massal dengan biaya sangat terjangkau.”

Pernyataan Bersama Santander AI Lab & Nvidia Enterprise Team

Membangun Digital Twin Bank & Catatan Kritis Fase Pilot

Selain agen nasabah, kemitraan ini mencakup pengembangan teknologi simulasi tingkat lanjut, termasuk pembuatan 'digital twin' (kembaran digital) dari seluruh sistem perbankan Santander. Melalui digital twin ini, manajemen risiko bank dapat menyimulasikan skenario stres likuiditas pasar, deteksi pencucian uang (AML) lintas negara, dan dinamika suku bunga secara real-time.

Meski demikian, angka penghematan biaya €0,03 per interaksi saat ini masih berasal dari kasus uji coba terkontrol di Santander AI Lab, bukan dari seluruh operasional grup yang melayani 160 juta nasabah. Rincian nilai kontrak finansial dan linimasa peluncuran bertahap per wilayah hukum anak usaha Santander di Eropa dan Amerika Latin masih harus dipantau dalam laporan triwulanan mendatang.

Rujukan & Sumber Primer

  1. Reuters via Fidelity: Santander signs three-year AI alliance with Nvidia to cut costs and boost customer service
  2. Expansión: Santander y Nvidia firman una alianza de tres años para desarrollar IA
  3. Agencia EFE: Santander desarrolla con Nvidia capacidades de IA para mejorar el servicio y reducir costes
  4. El Periódico: Santander y Nvidia firman una alianza de tres años para acelerar la adopción de la IA

FLUX 3 Image Klein: Model Visual Open-Weight 5,6B 4K

ai

Black Forest Labs merilis FLUX 3 Image Klein, model visual open-weight berkapasitas 5,6 miliar parameter yang mendukung generasi gambar 4K native, kendali tata letak bounding-box, hingga 10 gambar referensi, serta mampu berjalan di GPU konsumen 8 GB VRAM.

Baca analisis→

Anthropic & METR: Audit Keselamatan AI Setara Karyawan

ai

Anthropic resmi memberikan employee-level access kepada enam peneliti independen dari METR, melengkapi mereka dengan laptop perusahaan, ruang kerja fisik, dan akses ke internal tools tanpa hak veto publikasi temuan risiko.

Baca analisis→