これを実現するための設定は、私の知る限り存在しません。個人のメール受信トレイを確認すると、From 欄と Reply To 欄が一致しないケースは非常に一般的です。いくつかのアプリケーションでは、送信元を no-reply アドレスにしつつ、返信先を適切なアドレスに設定しています。他のアプリケーションは、Discourse と同様に、一見実在する From アドレスを使用しつつ、返信には Reply To アドレスを使用することを前提としています。
noreply@<domain.com> のように送信元アドレスを設定できるサイト設定が何か見落としている可能性はありますが、なければこれは妥当な機能リクエストだと思われます。
Discourse がこれらの返信に使用するメールテンプレートは email_reject_bad_destination_address です。このテンプレートは、サイトのメールテンプレートセクション（管理画面 / カスタマイズ / メール）に記載されているはずです。私のサイト内でこのテンプレートを検索しましたが、見つかりませんでした。これは修正が必要なバグのようです。discourse/app/controllers/admin/email_templates_controller.rb at main · discourse/discourse · GitHub にあるテンプレート一覧に追加する必要があります。これは小さな変更なので、すぐに完了できるはずです。
当面は、サイトの「管理画面 / カスタマイズ / テキスト」セクションに移動し、検索ボックスに以下のテキストを入力して email_reject_bad_destination_address テンプレートを編集してください。
system_messages.email_reject_bad_destination_address.text_body_template
検索結果の横に表示される「編集」ボタンをクリックして変更を加えてください。