タグに絵文字が含まれている場合、検索が機能しないようです

arnaud_sahuguet · 2020 年 2 月 13 日午前 1:36

絵文字を含むタグ（例：new-york-city-🇺🇸）を持っています。
検索や高度な検索を使用しても、そのトピックが表示されません。

以下は例です：
クエリ：
https://urbantech-forum.cornelltech.io/search?expanded=true&q=tags%3Anew-york-city-🇺🇸subway

以下は、本来表示されるべきトピックです：
https://urbantech-forum.cornelltech.io/t/subway-accessibility-info-and-elevator-escalator-status-alerts/139

codinghorror · 2020 年 2 月 13 日午前 2:46

これが解決可能かどうかはわかりませんが、@neil さんのご見解はいかがでしょうか？

j.jaffeux · 2020 年 2 月 13 日午前 9:40

私の知る限り、これはここに記述されている正規表現:

github.com/discourse/discourse

lib/search.rb

main


      
          end
          
          advanced_filter(/\Ain:unseen\z/i) do |posts|
            if @guardian.user
              posts.joins(
                "LEFT JOIN post_timings ON
                  post_timings.topic_id = posts.topic_id
                  AND post_timings.post_number = posts.post_number
                  AND post_timings.user_id = #{ActiveRecord::Base.connection.quote(@guardian.user.id)}
                ",
              ).where("post_timings.user_id IS NULL")
            end
          end
          
          advanced_filter(/\Awith:images\z/i) { |posts| posts.where.not(posts: { image_upload_id: nil }) }
          
          advanced_filter(/\Acategor(?:y|ies):(.+)\z/i) do |posts, terms|
            category_ids = []
          
            matches =
              terms

が絵文字を許可していないことが原因です。もしこれが絵文字に一致するようであれば、その後は動作するはずです。

良い絵文字正規表現として、GitHub - ticky/ruby-emoji-regex: 💎 A set of Ruby regular expressions for matching Unicode Emoji symbols. · GitHub のようなものを使用することを検討してもよいかもしれません。

どう思いますか、@sam？

sam · 2020 年 2 月 13 日午前 10:22

まあ、これは主要なエッジケースをサポートするための巨大なモンスターのように感じられます。Tag クラスにはすでにバリデーション用の正規表現がありますか？

j.jaffeux · 2020 年 2 月 13 日午前 10:35

ないと思いますけど、間違っているかもしれませんね。@neil ならもっと詳しいはずです。
私の知る限り、clean_tag 関数がこれだけあります：

github.com/discourse/discourse

lib/discourse_tagging.rb

main


      
                model.errors.add(:base, msg)
                return false
              end
            end
            true
          end
          
          def self.validate_one_tag_from_group_per_topic(guardian, model, category, tags = [])
            tags_cant_be_used = filter_tags_violating_one_tag_from_group_per_topic(guardian, category, tags)
          
            return true if tags_cant_be_used.blank?
          
            tags_cant_be_used.each do |_, incompatible_tags|
              model.errors.add(
                :base,
                I18n.t(
                  "tags.limited_to_one_tag_from_group",
                  tags: incompatible_tags.map(&:name).sort.join(", "),
                ),
              )
            end

これはクライアントサイドでも以下のようにコピーされています：

https://github.com/discourse/discourse/blob/master/app/assets/javascripts/select-kit/mixins/tags.js.es6#L80

また、例えば以下のようにクライアントサイドで生成されているため、他の場所でも役立つかと思います：
https://github.com/discourse/discourse/blob/master/app/assets/javascripts/pretty-text/emoji.js.es6#L24

neil · 2020 年 2 月 13 日午後 4:25

イモージのタグ名に対するテストがあるかどうかは疑問です。2.5 でこれをサポートできるように検討しましょうか？

lucasbasquerotto · 2020 年 2 月 13 日午後 5:56

検索で subway キーワードなしにタグのみを使用すると、検索結果は 1 つのトピックのみを返すことが確認できました（OP に投稿されたトピックではありません）：

https://urbantech-forum.cornelltech.io/search?expanded=true&q=tags%3Anew-york-city-🇺🇸

他のキーワードを使用しても同様ですが、これも以前返されたトピックのみに対して有効です：

https://urbantech-forum.cornelltech.io/search?expanded=true&q=tags%3Anew-york-city-🇺🇸%20personal

タグを使用しない場合は正しく返されます：

https://urbantech-forum.cornelltech.io/search?expanded=true&q=new-york-city-🇺🇸

以前タグ付きで返されたトピックは、タグ名を含むキーワードを使用した際の 1 番目の結果ですが、実際の投稿は異なります。これは、投稿内のメタデータなどが検索にヒットしているためで、タグ自体が原因ではない可能性もありますが、確実なことは言えません。

トピック		返信	表示
How to create a tag "🎥"? Product Support tags	5	263	2024 年 11 月 21 日
Emoji in tag names Feature emoji , tags	20	8242	2025 年 10 月 13 日
Existing emoji tags appear as new in the composer; new emoji tags disappear after posting Bug emoji	0	63	2026 年 10 月 16 日
Emoji shortcodes aren't displayed when they're part of the search terms UX emoji , search	0	374	2023 年 7 月 7 日
:crying_cat_face: Emoji's in title shown as code on initial load of a topic page Bug	3	1029	2017 年 12 月 21 日

タグに絵文字が含まれている場合、検索が機能しないようです

関連トピック