Wijenperusahaan AI di belakang Asisten suara yang realistis mengesankan Mayatelah merilis model AI dasar yang memberi daya pada Maya, seperti yang baru -baru ini dijanjikan.
Model, yang berukuran 1 miliar parameter dalam ukuran (“parameter” yang mengacu pada komponen individu model), berada di bawah lisensi Apache 2.0, yang berarti dapat digunakan secara komersial dengan beberapa batasan. Disebut CSM-1B, model ini menghasilkan “kode audio RVQ” dari input teks dan audio, menurut Deskripsi wijen tentang platform AI dev memeluk wajah.
RVQ mengacu pada “kuantisasi vektor residual,” teknik untuk mengkode audio ke dalam token diskrit yang disebut kode. RVQ digunakan dalam sejumlah teknologi audio AI baru -baru initermasuk Google's Soundstream dan Meta's EncodeC.
CSM-1B menggunakan model dari keluarga Llama Meta sebagai tulang punggungnya dipasangkan dengan komponen “decoder” audio. Varian CSM Powers Maya yang disesuaikan, kata Sesame.
“Model open-source di sini adalah model pembangkit dasar,” tulis Sesame di CSM-1B Wajah memeluk Dan Girub repositori. “Ini mampu menghasilkan berbagai suara, tetapi belum disesuaikan dengan suara tertentu […] Model ini memiliki beberapa kapasitas untuk bahasa non-Inggris karena kontaminasi data dalam data pelatihan, tetapi kemungkinan tidak akan berhasil. ”
Tidak jelas data apa yang digunakan wijen untuk melatih CSM-1B. Perusahaan tidak mengatakannya.
Model ini tidak memiliki perlindungan nyata untuk dibicarakan, perlu dicatat. Ini adalah situasi “sistem kehormatan”. Wijen hanya mendesak pengembang dan pengguna untuk tidak menggunakan model untuk meniru suara seseorang tanpa persetujuan mereka, membuat konten yang menyesatkan seperti berita palsu, atau terlibat dalam kegiatan “berbahaya” atau “jahat”.
Saya mencoba demo Di wajah memeluk, dan mengkloning suaraku membutuhkan waktu kurang dari satu menit. Dari sana, mudah untuk menghasilkan pidato dengan keinginan hati saya, termasuk pada topik kontroversial seperti pemilihan dan propaganda Rusia:
Sesame, yang didirikan oleh co-pencipta Oculus Brendan Iribe, menjadi viral pada akhir Februari untuk asisten teknologi, yang mendekati membersihkan wilayah Lembah yang luar biasa. Asisten Maya dan Sesame lainnya, bermil -mil, mengambil napas dan berbicara dengan disfluensi, dan dapat terganggu saat berbicara, seperti mode suara Openai.
Wijen telah mengumpulkan jumlah modal yang dirahasiakan dari Andreessen Horowitz, Spark Capital, dan Matrix Partners. Selain membangun Tech Asisten Suara, perusahaan mengatakan itu membuat prototipe kacamata AI “dirancang untuk dipakai sepanjang hari” yang akan dilengkapi dengan model kustomnya.
