Sí, creo que sí 
Estás intentando usar el endpoint compatible con OpenAI que proporciona Google en lugar del endpoint nativo de Gemini.
Intenta usar:
https://generativelanguage.googleapis.com/v1beta/models/gemini-2.0-flash
Y usa el proveedor Gemini.
La capa de compatibilidad de OpenAI tiene algunas limitaciones.