Estimation du coût d'activation de Discourse AI pour le contenu et la recherche associés

[NateDhaliwal]

@SubStrider

Pour un LLM auto-hébergé, quelle serait une configuration/un coût de serveur typique requis ?

Je crois que vous auriez besoin d’un GPU il est préférable d’avoir un GPU si vous souhaitez auto-héberger. Regardez des choses comme Ollama.

Voir aussi :

Estimating costs of using LLMs for Discourse AI

In order to use certain Discourse AI features, users are required to use a Large Language Model (LLM) provider. Please see each AI feature to determine which LLMs are compatible. If cost is a significant worry, one way to combat that is to set usage limits right from the vendor and use a monthly budget. Another option is to only let select users and groups access the AI features There are several variable factors to consider when calculating the costs of using…