Stiamo utilizzando internamente questo plugin per le riunioni, il che è stato ottimo per raccogliere feedback e farlo evolvere in base a casi d’uso reali. Negli ultimi due settimane, le novità principali sono:
Soppressione del rumore con AI
La soppressione del rumore è stata completamente rifatta, con diverse modifiche. Offriamo ora controlli per gestire le funzionalità standard di WebRTC:
- Soppressione del rumore
- Controllo automatico del guadagno
- Cancellazione dell’eco
Inoltre, il plugin ora include tre diversi modelli di AI per chi necessita di una migliore soppressione del rumore, da bassa ad alta intensitĂ rispettivamente:
- RNNoise
- DTLN
- DeepFilter3
Chiamate dirette
Gli utenti possono ora avviare chiamate dirette 1-a-1 o 1-a-molti tramite un pulsante sulla scheda utente. Questo utilizza l’infrastruttura di stanze effimere che abbiamo costruito, che verrà utilizzata anche per gestire integrazioni in futuro, come con il plugin eventi.
Inviti
Facendo clic destro su una stanza è possibile generare inviti, e viene utilizzata la cronologia delle conversazioni in quella stanza per suggerire utenti.
Pacchetti di suoni
I suoni di Resenha seguono ora il pacchetto di suoni preferito per le notifiche di chat, come descritto in Nuovi pacchetti di suoni di notifica per la chat.
UX delle stanze
Clic destro per copiare il link alla stanza, ridimensionamento automatico e ridimensionamento dei widget, posizionamento dei widget sopra l’intestazione del sito, supporto per clic con shift sulle stanze, accuratezza e migliori prestazioni nell’indicatore di attività vocale.
Cambio fotocamera su Android
Ora è possibile passare senza interruzioni tra la fotocamera frontale e quella posteriore del telefono Android durante la chiamata.
Avviso di connettivitĂ mesh
La prima volta che un utente cerca di connettersi a una stanza che utilizza il mesh WebRTC, viene presentato un avviso che spiega la potenziale esposizione dell’IP.
E per finire, due funzionalitĂ sperimentali 
Sottotitoli in diretta
Abbiamo aggiunto sottotitoli in diretta su base opzionale, alimentati da modelli di AI all’avanguardia che girano sul dispositivo.
Quando abilitato, scarichiamo un modello di AI da 2,5 GB che viene eseguito utilizzando WebGPU, quindi la compatibilità è limitata a dispositivi veloci e moderni.
C’è molto da rifinire e ottimizzare su questa funzionalità , quindi fatemi sapere com’è andata.
Trascrizione
Gli utenti con i sottotitoli in diretta abilitati possono ora avviare trascrizioni da questi, che vengono salvate in una nuova bozza di argomento. Dopo aver terminato la registrazione, si ottiene un compositore con tutte le trascrizioni salvate utilizzando lo stesso formato delle citazioni della chat.