そのチャンネルがカテゴリと連携された場合、そのカテゴリを見ることができる全員が自動的にメンバーとなるため、ユーザーを招待する必要はありません。グループをそのカテゴリに一致するように変更するだけで十分です。
ただし、そのチャンネルがグループチャット(プライベートなもの)の場合、まずはこちらをお読みください。