EMBER_CLI_PROD_ASSETS を 1 にするとアセットのプリコンパイルがクラッシュする

trobiyo · 2022 年 2 月 17 日午後 1:46

Comes from New installs will default to Ember CLI builds in Production - #36 by david

Hi Team,

While trying setting EMBER_CLI_PROD_ASSETS to 1, I’m getting the following at the time of precompiling assets (version 2.9.0.beta2 commit: d2de058ff51f204fcf85c86a00750a59505af3bb):

yarn run v1.22.17
$ /var/www/discourse/app/assets/javascripts/node_modules/.bin/ember build -prod
WARNING: Node v16.13.2 is not tested against Ember CLI on your platform. We recommend that you use the most-recent "Active LTS" version of Node.js. See https://git.io/v7S5n for details.
DEPRECATION: The integration of jQuery into Ember has been deprecated and will be removed with Ember 4.0. You can either opt-out of using jQuery, or install the `@ember/jquery` addon to provide the jQuery integration. Please consult the deprecation guide for further details: https://emberjs.com/deprecations/v3.x#toc_jquery-apis
A system error occurred: uv_os_get_passwd returned ENOENT (no such file or directory)

node:internal/errors:464
    ErrorCaptureStackTrace(err);
    ^

SystemError [ERR_SYSTEM_ERROR]: A system error occurred: uv_os_get_passwd returned ENOENT (no such file or directory)
    at new SystemError (node:internal/errors:233:5)
    at new NodeError (node:internal/errors:336:7)
    at Object.userInfo (node:os:347:11)
    at summarizeProcess (/var/www/discourse/app/assets/javascripts/node_modules/console-ui/lib/summarize-process.js:17:15)
    at writeError (/var/www/discourse/app/assets/javascripts/node_modules/console-ui/lib/write-error.js:114:3)
    at UI.writeError (/var/www/discourse/app/assets/javascripts/node_modules/console-ui/lib/index.js:167:20)
    at CLI.logError (/var/www/discourse/app/assets/javascripts/node_modules/ember-cli/lib/cli/cli.js:318:13)
    at CLI.run (/var/www/discourse/app/assets/javascripts/node_modules/ember-cli/lib/cli/cli.js:253:12)
    at processTicksAndRejections (node:internal/process/task_queues:96:5)
    at async module.exports (/var/www/discourse/app/assets/javascripts/node_modules/ember-cli/lib/cli/index.js:145:12) {
  code: 'ERR_SYSTEM_ERROR',
  info: {
    errno: -2,
    code: 'ENOENT',
    message: 'no such file or directory',
    syscall: 'uv_os_get_passwd'
  },
  errno: [Getter/Setter],
  syscall: [Getter/Setter]
}
error Command failed with exit code 1.
info Visit https://yarnpkg.com/en/docs/cli/run for documentation about this command.

Any hint about why this is happening?

Cheers,
Ismael

Falco · 2022 年 2 月 17 日午後 2:51

これはインストールガイドを使用した本番環境へのインストールですか？

再構築を試していただけますか？

trobiyo · 2022 年 2 月 17 日午後 3:53

インスタンスを再構築しても成功しません。uv_os_get_passwd の呼び出しが原因で発生しているのか、または一般的にこのエラーの原因は何なのか、システム/設定で特定のユーザーが設定されていることを期待しているのか、といった点について、より詳しく知りたいです。

よろしくお願いいたします。
イスマエル

Falco · 2022 年 2 月 17 日午後 5:57

Discourse イメージは具体的にどのように実行していますか？セキュリティのための追加フラグはありますか？

このトレースに従うと、問題は Ember-CLI のビルドが失敗しており、エラーを印刷しようとしているときに、さらに別の例外が発生して実際の例外が隠蔽されていることです。

Discourse イメージに入って、以下を試していただけますか？

node
const os = require('os');
os.userInfo().shell

？

trobiyo · 2022 年 2 月 18 日午前 8:19

興味深いことに、あなたの提案を実行したところ、これが出力されました（root以外のランダムなユーザーで内部ライブラリシステムにアクセスすることを意図している場合は、完全に理にかなっています）。

node
Welcome to Node.js v16.13.2.
Type ".help" for more information.

> const os = require('os');
undefined

> os.userInfo().shell
Uncaught:
SystemError [ERR_SYSTEM_ERROR]: A system error occurred: uv_os_get_passwd returned ENOENT (no such file or directory)
    at __node_internal_captureLargerStackTrace (node:internal/errors:464:5)
    at new SystemError (node:internal/errors:233:5)
    at new NodeError (node:internal/errors:336:7)
    at Object.userInfo (node:os:347:11) {
  code: 'ERR_SYSTEM_ERROR',
  info: {
    errno: -2,
    code: 'ENOENT',
    message: 'no such file or directory',
    syscall: 'uv_os_get_passwd'
  },
  errno: [Getter/Setter: -2],
  syscall: [Getter/Setter: 'uv_os_get_passwd']
}

>

Discourseイメージはどのように実行していますか？セキュリティのために追加のフラグはありますか？

OpenShiftをベースにしたコンテナソリューションを使用しており、DiscourseはランダムなユーザーIDで実行されています。今のところ問題はありません。アプローチは公式のインストールガイドと非常によく似ています。
EMBER_CLI_PROD_ASSETS を 0 に設定することでこの問題を回避できます。アセットは以前のようにプリコンパイルされますが、遅かれ早かれ、この方向に進む計画がある場合、現在のプリコンパイルプロセスが放棄された場合、このようなソリューションにとって深刻な問題となる可能性があります。

そこで、いくつか質問があります。

以前の方法でのアセットのプリコンパイルを放棄する予定はありますか？（もしそうなら）その時期はいつ頃ですか？
os マシンに別の方法でアクセスする方法はありますか、または別の方法を検討していただけますか？これにより、ランダムなユーザーIDを持つコンテナソリューションでも引き続き機能しますか？

この件についてご検討いただき、誠にありがとうございます。

よろしくお願いいたします。
Ismael

Falco · 2022 年 2 月 18 日午後 12:32

今後数週間で EMBER_CLI_PROD_ASSETS を削除します。

直接使用しているわけではありませんが、依存関係の依存関係の依存関係…といった形で使用しています。これも奇妙な呼び出しだと思いますが、あまりコントロールできるものではありません。

RGJ · 2022 年 2 月 18 日午後 1:05

表示されているエラーは実際のエラーではありません。
実際のエラーを表示しようとしたときに発生するエラーです…

trobiyo · 2022 年 2 月 18 日午後 1:38

Issue with non 'username' defined · Issue #2373 · nodejs/node-gyp · GitHub および os.userInfo throws if no username in docker container · Issue #25714 · nodejs/node · GitHub と全く同じ問題です。

ランダムなユーザー ID を使用すると、os のシステム関連ユーティリティメソッドやプロパティをロードする際に node がエラーを発生させます。

確認ですが、古い方法は完全に非推奨/削除されるということでよろしいでしょうか？

よろしくお願いいたします。
Ismael

trobiyo · 2022 年 2 月 18 日午後 1:42

はい、上記の投稿で理解しました。チームがこれを許可するための特別なアクション/チェックを行わない限り、ランダムなユーザーIDを使用する時代は終わったと思います。

よろしく、
イスマエル

Falco · 2022 年 2 月 18 日午後 1:48

はい、その通りです。EmberJSプロジェクトが推奨するものに追従し、より標準的なものにするために、この新しいアセットパイプラインを数年かけて徐々にリリースしてきました。すでにロールアウトの最終段階に入っています。

trobiyo · 2022 年 2 月 18 日午後 2:03

承知いたしました。
いつも詳細な情報提供ありがとうございます。大変助かります。

よろしくお願いいたします。
イスマエル

trobiyo · 2022 年 2 月 18 日午後 4:25

念のため、誰かの役に立つかもしれないので共有します。ランダムなUIDを持つEmber CLIを期待どおりに動作させる少なくとも1つの方法があり、それはrake assets:precompile操作を実行する際に、割り当てられたランダムなUIDに/etc/passwdの下にエントリがあることを保証することです。

たとえば次のようになります。

if [ `id -u` -ge 10000 ]; then
  cat /etc/passwd | sed -e "s/^discourse:/builder:/" > /tmp/passwd
  echo "discourse:x:`id -u`:`id -g`:,,,:/home/discourse:/bin/bash" >> /tmp/passwd
  cat /tmp/passwd > /etc/passwd
  rm /tmp/passwd
fi

これにより、app/assets/javascripts/discourse run ember build -prodコマンド（discourse/assets.rake at tests-passed · discourse/discourse · GitHubより）が機能します。

yarn run v1.22.17
$ /discourse/app/assets/javascripts/node_modules/.bin/ember build -prod
WARNING: Node v16.13.2 is not tested against Ember CLI on your platform. We recommend that you use the most-recent "Active LTS" version of Node.js. See https://git.io/v7S5n  for details.
DEPRECATION: The integration of jQuery into Ember has been deprecated and will be removed with Ember 4.0. You can either opt-out of using jQuery, or install the `@ember/jquery` addon to provide the jQuery integration. Please consult the deprecation guide for further details: https://emberjs.com/deprecations/v3.x#toc_jquery-apis 
- Building
Environment: production
- Building
- building... 
[WARN] (broccoli-terser-sourcemap) Minifying "assets/chunk.529.6ee9018498e97f872147.js" took: 24288ms (more than 20,000ms)
...

この操作は、プリコンパイルのためだけにほぼ2GBのRAMを消費するなど、非常にコストがかかることも気づきました:scream:

よろしく、
イスマエル

Falco · 2022 年 2 月 18 日午後 5:10

先週は4GB以上使用していましたが、最近では1GBのRAM/2GBのswapサーバーで動作させることができました。

system · 2022 年 3 月 20 日午後 5:11

This topic was automatically closed 30 days after the last reply. New replies are no longer allowed.

トピック		返信	表示
New installs will default to Ember CLI builds in Production Announcements ember	36	3488	2022 年 6 月 17 日
Clean install of discourse resulting in failure Installation	9	412	2024 年 3 月 24 日
New Install Bootstrap Fail in 'bundle exec rake themes:update assets:precompile' Installation	7	453	2024 年 2 月 21 日
Discourse Assets Missing Installation unsupported-install	17	2204	2020 年 2 月 22 日
Failed new install Installation	8	199	2025 年 3 月 19 日

EMBER_CLI_PROD_ASSETS を 1 にするとアセットのプリコンパイルがクラッシュする

関連トピック