El script de importación de Smf2 está funcionando muy lentamente

Quiero preguntar sobre el importador de smf2. Funciona bien, pero va muy lento.

Y va cada vez más lento. Intenté migrar con drupal antes y fue un poco más rápido, funcionó 3-4 días. Durante toda la noche, smf2.rb avanzó un 3%. En 18 horas, solo ha avanzado un 8,2%.

Mi pregunta es: ¿Cuál es la mejor manera de acelerar la operación?

¿Cuántas publicaciones por minuto está informando? ¿Cuántas publicaciones tienes?

Las ejecuciones posteriores serán más rápidas ya que omiten los datos ya importados, por lo que puedes tener poco tiempo de inactividad cuando realices el cambio final.

¿Tienes una CPU rápida y mucha RAM? ¿Está optimizado PostgreSQL?

1 me gusta

Hola @pfaffman, la migración posterior aún no ha comenzado, ahora se está importando al usuario y muestra alrededor de 1900 elementos por minuto, pero no va a esa velocidad, sino que se informan alrededor de 60-70 elementos por minuto. ¿Alguna sugerencia sobre cómo puedo acelerar esta operación?

¿Cuántos usuarios hay?

1900/minuto es lo más alto que he visto.

¿Qué quieres decir con que son 60-70 por minuto?

Hay algunos scripts de importación masiva que son más rápidos, pero no creo que haya uno para smf2.

1 me gusta

Usuarios totales alrededor de 5.8 Lakh. y sí, 1900/minuto es muy alto, pero en realidad no está sucediendo a esa velocidad, ya que lo estoy verificando tanto desde el backend como desde la interfaz de usuario, se está migrando alrededor de 60-70 por minuto. He revisado esa carpeta también, no hay ningún script disponible para smf2. ¿Hay algún script de importación masiva disponible en otro lugar para smf2?

A menos que los usuarios no se estén importando por alguna razón (¿ya existen?), entonces el número que informa es el número importado.

Ah, pero si lo estás ejecutando después de la importación inicial, entonces ese número está inflado porque está contando a los usuarios que existían cuando comenzó el script. Así que eso es aproximadamente una semana para importar esos.

¿Cuántas publicaciones?

¿Qué tan rápida es la máquina? ¿Cuánta RAM? ¿Qué has hecho para ajustar postgres? ¿Es tu base de datos de origen un cuello de botella?

No tengo conocimiento de un script secreto de importación masiva para smf2. He tenido una importación que tardó semanas en ejecutarse. La importación final no tardará tanto. Simplemente aguanta.

3 Me gusta