Diese Zeit, die Jobs::GenerateEmbeddings pro Aufruf in Anspruch nimmt, ist zu erwarten, da Sie einen API-Aufruf an einen Embedding-Dienst senden, um die Daten zu erhalten. Dieser Graph ist normal, er zeigt nur, dass etwas eine Weile dauert; eine andere GPU in der Cloud führt die eigentliche Arbeit aus.
Dass die CPU stark ansteigt, ist sehr unerwartet. Möglicherweise war Ihr PG-Setup von Anfang an extrem ressourcenintensiv, und das Einfügen von etwa 1000 Zahlen hintereinander reicht aus, um es zu beeinträchtigen.
Wir benötigen hier viel mehr Daten, um die Diagnose zu unterstützen: Was sind die Spezifikationen des Servers? Was zeigen die tatsächlichen CPU-Graphen, welcher Prozess verbraucht die CPU, welchen Embedding-Dienst verwenden Sie usw. …