Importation via muut.rb

Soutien Migration
1

Bonjour,

Je rencontre l’erreur suivante lors de l’exécution du script d’importation pour muut :

Importation des catégories
    2 / 2 (100,0 %)  [5170854 éléments/min]   
Importation des discussions
Traceback (most recent call last):
	8: from script/import_scripts/muut.rb:184:in `\u003cmain\u003e'
	7: from /var/www/discourse/script/import_scripts/base.rb:47:in `perform'
	6: from script/import_scripts/muut.rb:25:in `execute'
	5: from script/import_scripts/muut.rb:82:in `import_discussions'
	4: from script/import_scripts/muut.rb:82:in `each'
	3: from script/import_scripts/muut.rb:84:in `block in import_discussions'
	2: from script/import_scripts/muut.rb:84:in `each'
	1: from script/import_scripts/muut.rb:110:in `block (2 levels) in import_discussions'
script/import_scripts/muut.rb:162:in `process_muut_post_body': undefined method `gsub!' for nil:NilClass (NoMethodError)

Quelqu’un pourrait-il m’orienter vers la bonne direction pour résoudre cette erreur ?

2

Un champ, probablement les données de l’article, est manquant, peut-être parce que le script accède au mauvais nom de champ.

3

Voici une mise à jour muut.rb qui a fonctionné pour moi :

# frozen_string_literal: true

require "csv"
require File.expand_path(File.dirname(__FILE__) + "/base.rb")

# Modifiez les constantes et la méthode initialize pour vos données d'importation.

class ImportScripts::Muut < ImportScripts::Base

  JSON_FILE_PATH = "/chemin/vers/fichier/json"
  CSV_FILE_PATH = "/chemin/vers/fichier/csv"

  def initialize
super

@imported_users = load_csv
@imported_json = load_json
  end

  def execute
puts "", "Importation depuis Muut..."

import_users
import_categories
import_discussions

puts "", "Terminé"
  end

  def load_json
JSON.parse(repair_json(File.read(JSON_FILE_PATH)))
  end

  def load_csv
CSV.parse(File.read(CSV_FILE_PATH))
  end

  def repair_json(arg)
arg.gsub!(/^\(/, "")     # le contenu du fichier est entouré de ( )
arg.gsub!(/\)$/, "")

arg.gsub!(/\]\]$/, "]")  # il peut y avoir un ] supplémentaire à la fin

arg.gsub!(/\}\{/, "},{") # des virgules manquantes parfois !

arg.gsub!("}]{", "},{")  # des crochets surprises
arg.gsub!("}[{", "},{")  # :troll:

arg
  end

  def import_users
puts '', "Importation des utilisateurs"

create_users(@imported_users) do |u|
  {
    id: u[0],
    email: u[1],
    created_at: Time.now
  }
end
  end

  def import_categories
puts "", "Importation des catégories"

create_categories(@imported_json['categories']) do |category|
  {
    id: category['path'], # muut n'a pas d'ID pour les catégories, utilisez donc le chemin
    name: category['title'],
    slug: category['path']
  }
end
  end

  def import_discussions
puts "", "Importation des discussions"

topics = 0
posts = 0

@imported_json['categories'].each do |category|

  @imported_json['threads'][category['path']].each do |thread|

    next if thread["seed"]["key"] == "skip-this-topic"

    mapped = {}
    mapped[:id] = "#{thread["seed"]["key"]}-#{thread["seed"]["date"]}"

    if thread["seed"]["author"] && user_id_from_imported_user_id(thread["seed"]["author"]["path"]) != ""
      mapped[:user_id] = user_id_from_imported_user_id(thread["seed"]["author"]["path"]) || -1
    else
      mapped[:user_id] = -1
    end

    # mettre à jour le nom d'affichage de l'utilisateur
    if thread["seed"]["author"] && thread["seed"]["author"]["displayname"] != "" && mapped[:user_id] != -1
      user = User.find_by(id: mapped[:user_id])
      if user
        user.name = thread["seed"]["author"]["displayname"]
        user.save!
      end
    end

    mapped[:created_at] = Time.zone.at(thread["seed"]["date"])
    mapped[:category] = category_id_from_imported_category_id(thread["seed"]["path"])
    mapped[:title] = CGI.unescapeHTML(thread["seed"]["title"])

    if thread["seed"]["body"] == ""
      thread["seed"]["body"] = " ";
    end
    mapped[:raw] = process_muut_post_body(thread["seed"]["body"])
    mapped[:raw] = CGI.unescapeHTML(thread["seed"]["title"]) if mapped[:raw] == ""

    parent_post = create_post(mapped, mapped[:id])
    unless parent_post.is_a?(Post)
      puts "Erreur lors de la création du sujet #{mapped[:id]}. Ignoré."
      puts parent_post.inspect
    end

    # décommentez la ligne ci-dessous pour créer un lien permanent
    # Permalink.create(url: "#{thread["seed"]["path"]}:#{thread["seed"]["key"]}", topic_id: parent_post.topic_id)

    # créer les réponses
    if thread["replies"].present? && thread["replies"].count > 0
      thread["replies"].reverse_each do |post|

        if post_id_from_imported_post_id(post["id"])
          next # ce message a déjà été importé
        end

        if post["body"] == ""
          post["body"] = " "
        end

        new_post = create_post({
            id: "#{post["key"]}-#{post["date"]}",
            topic_id: parent_post.topic_id,
            # Modifiez la ligne suivante pour obtenir l'unique user_id à partir de la valeur author/path.
            user_id: user_id_from_imported_user_id(post["author"]["path"]) || -1,
            raw: process_muut_post_body(post["body"]),
            created_at: Time.zone.at(post["date"])
          }, post["id"])

        if new_post.is_a?(Post)
          posts += 1
        else
          puts "Erreur lors de la création du message #{post["id"]}. Ignoré."
          puts new_post.inspect
        end

      end

    end

    topics += 1
  end
end

puts "", "#{topics} sujets importés avec #{topics + posts} messages."
  end

  def process_muut_post_body(arg)
raw = arg.dup
raw = raw.to_s
raw = raw[0..-1]

# saut de ligne
if raw != nil 
  raw.gsub!(/\\n/, "\n")

# bloc de code
  raw.gsub!("---", "```\n")

# tabulation
  raw.gsub!(/\\t/, '  ')

# guillemet double
  raw.gsub!(/\\\"/, '"')

  raw = CGI.unescapeHTML(raw)
end
raw
  end

  def file_full_path(relpath)
File.join JSON_FILES_DIR, relpath.split("?").first
  end

end

if __FILE__ == $0
  ImportScripts::Muut.new.perform
end