카테고리를 사실상 PRIVATE(비공개)로 설정하면 모든 봇은 물론 LLM, 혹은 AI 봇이라고 부르는 것들까지도 확실하게 차단할 수 있다는 데 동의하시나요?
솔직히 말해서, 최소 하나의 주제에서 이 문제를 다뤄보고 ChatGPT를 검색해본 결과, Discourse를 비롯한 다른 많은 소프트웨어 제공업체들이 ChatGPT의 위협적이고 파괴적인 측면을 심각하게 받아들이지 않는 것 같습니다. 제 생각에는 AI를 전혀 사용하지 않기를 원하는 사이트 소유자와 관리자를 위해 지원과 기능을 제공해야 한다는 점을 진지하게 고민해야 합니다.
ChatGPT와 그것이 상징하는 모든 것은 양쪽 끝에서 모두 도화선이 붙잡혀 있는 상황 중 하나입니다. 
네, 꽤 확실한 방법입니다.
완전히 악의적인 행위자들은 물론 여전히 가입할 수 있겠지만, 적법한 크롤러는 모두 제거될 것입니다.
참고: 공동 창업자 몇 명을 태그한 댓글을 삭제했습니다. 그건 좀 과도해 보입니다.
시간이 말해준다. 이는 과한 것이 아니다. 사람들이 깨어날 필요가 있다. 나는 큰 맹점을 만들어내는 편향이 보이며, 이는 업계 전체의 관측이기도 하지만, AFAICT(본인이 파악한 바로는) Discourse도 별반 다르지 않다.
유일한 선택지가 전체 포럼을 다시 비공개로 설정하는 것이라면, 음, "시장"은 단순히 한 방향으로만 변화한 것이 아니라 근본적으로 수많은 방향으로 변했기 때문에 운영 차원에서 어느 정도 수준에서 이를 고려해야 한다.
과한 것은 ChatGPT와 그 영향력이다. '탐욕스럽다’는 말로는 지금 벌어지고 있는 일의 절반도 설명할 수 없다. 모든 곳에서 말이다.
이것은 모든 포럼과 인간이 만든 모든 콘텐츠를 근본적으로 훼손한다. 지금은 세련된 기능들과 철학적 가정에 대해 가지고 노는 것이 편할 수 있지만, 그 시간은 이미 지나갔다. 이 기술은 이제 야생에 놓여 있다. 월드 와이드 웹에 발을 담근 모든 사람은 결정을 내려야 한다.
제가 말한 것(그리고 삭제한 부분)이 과한 것은, 순수하게 기술적인 질문을 한 지 고작 17시간 만에 공동창업자/CEO 두 명에게 후속 조치를 요청하는 것입니다.
LLM에 대한 당신의 우려는 제가 동의하지는 않지만, 실제로 존재하며 이해할 수 있는 것입니다.
그 점은 이해하지만, 긴급성을 이해하지 못하고 있는 것 같습니다. 기술적 질문에 대한 답변이 인간적인 관점에서 볼 때 전혀 기술적이지 않은, 매우 중대한 결과와 결과를 초래한다는 점이 그렇습니다.
수많은 함의가 있음에도 불구하고 모두가 잠을 자고 걷는 것처럼 무관심한 모습은 모든 수준에서 우려가 결여되어 있음을 보여줍니다.
그 답변에 감사드립니다.
우리가 가진 것이 나트를 깨기 위한 망치 하나뿐인가요, 아니면 그 나트가 실제로는 영점 무한(nut)이고, 우리의 망치는 정말로 깃털의 상상의 산물인가요?
그 말이 무슨 뜻인지 아시나요? 
당신의 뜻을 이해하고 있다고 생각합니다.
만약 당신의 사이트가 익명 사용자의 정보 열람을 허용한다면, 누가 그 정보를 얻고 그것을 어떻게 사용할지에 대해 통제할 수 없습니다. 제 이해로는 구글이 정책을 변경하여, 그들이 읽을 수 있는 모든 것을 AI에 사용할 수 있다고 명시한 것 같습니다.
사이트가 로그인한 사용자의 열람을 허용한다면, 해당 사용자가 정보를 어떻게 사용할지에 대해서도 통제할 수 없습니다.
사이트가 사용자의 로그인을 허용한다고 해서, 해당 자격 증명을 사용하는 사람이 반드시 계정을 만든 사람이라고 보장할 수는 없습니다. AI가 당신의 데이터를 사용하지 않도록 확실하게 막고 싶다면, 단순히 네트워크 연결을 해제하면 됩니다.
리버스 프록시를 사용할 때는 일부 통제가 가능합니다. 하지만 사용자가 설정을 변경하거나 가짜 사용자 에이전트를 사용하거나, 널리 알려진 IP 주소를 사용하는 경우(이 방법은 어렵고 불안정합니다)에는 예외입니다.
사람의 눈으로는 볼 수 있지만 지구상의 어떤 카메라로도 촬영할 수 있는 마법 같은 책을 개발하게 된다면 알려주세요.
이러한 마법 같은 기술에 매우 호기심이 생깁니다.
Discourse 플랫폼에서 호스팅 중인 포럼에 대해서는, 그 포럼의 규칙이 적용됩니다. 일부 규칙은 자동으로 적용할 수 있지만, 다른 규칙은 그렇지 않을 수 있습니다(예: 파란 눈을 가진 사람은 이 포럼을 읽을 수 없음).
아무도 이 문제를 진지하게 받아들이지 않는 것 같습니다. 왜냐하면 아무도 이 사건의 진정한 규모를 인정하고 이해하기를 원하지 않기 때문입니다. 그렇게 되면 자기 권한 범위 내에서 실제로 무언가를 해야 한다는 압박을 받게 되는데, 그렇게 하기보다는 끝까지 경쟁에 합류하여 소프트웨어에 AI를 통합하는 것이 훨씬 쉽기 때문입니다. 그들은 시장이 기대하는 성과를 내고, 최첨단에 서 있으며, 핵심적인 역할을 하고 있다고 생각하기 때문입니다. 지난 수십 년간 모든 수준에서 과도한 도덕적 상대주의가 무분별하게 허용된 것이 모든 것을 무너뜨리는 결과를 초래하고 있으며, 기술은 이를 광속으로 실현하고 있습니다. 마치;
모든 사람이 자신이 여기 있는 이유를 잊어버린 것처럼.
조금 속도를 늦추겠습니다.
여러분의 우려는 잘 듣고 있지만, 저희는 그걸 공유하지 않습니다. 그리고 그것이 괜찮습니다. 의견이 달라질 수 있습니다. 우리는 정보를 바탕으로 결정을 내리고 있습니다. 아무도 그걸 여러분에게 강요하지 않습니다. 
@satonotdead 정확합니다
OpenAI는 모델 학습에 몇 가지 데이터셋을 활용했습니다. Discourse 콘텐츠가 포함될 가능성이 가장 높은 데이터셋은 Common Crawl 데이터셋의 필터링된 버전인 것으로 보입니다. 자세한 내용은 이 문서의 2.2절을 참고하세요: https://arxiv.org/pdf/2005.14165.pdf. Common Crawl은 사이트를 크롤링할 때 CCBot/2.0 사용자 에이전트 문자열을 사용합니다.
Discourse 사이트를 공개적으로 접근 가능하게 유지하되, 향후 Common Crawl 데이터셋에 그 콘텐츠가 추가되는 것을 방지하려면, Discourse 사이트의 blocked crawler user agents(차단할 크롤러 사용자 에이전트) 설정에 CCBot을 추가할 수 있습니다. Common Crawl 사용자 에이전트를 차단하는 것에는 단점이 있을 수 있다는 점을 유의하세요 (How to Block OpenAI ChatGPT From Using Your Website Content):
“Common Crawl을 포함한 많은 데이터셋은 URL을 필터링하고 분류하여 광고를 표적할 웹사이트 목록을 만드는 회사들에 의해 사용될 수 있습니다.”
Discourse에서 blocked crawler user agents 설정을 사용하는 방법은 여기에서 확인할 수 있습니다: discourse/lib/crawler_detection.rb at main · discourse/discourse · GitHub.
Common Crawl은 robots.txt 파일의 규칙을 따르므로, 해당 파일에 다음 규칙을 추가하여 차단할 수도 있습니다:
User-agent: CCBot
Disallow: /
ChatGPT 플러그인은 사용자를 대신하여 요청을 보낼 때 ChatGPT-User 사용자 에이전트를 사용합니다. 이 사용자 에이전트는 학습 데이터셋을 생성하기 위해 웹을 크롤링하는 데 사용되지 않습니다: https://platform.openai.com/docs/plugins/bot. 이 사용자 에이전트도 blocked crawler user agents 설정에 추가하거나(또는 robots.txt 파일에 Disallow 규칙을 추가하여) 차단할 수 있습니다.
다른 사람들이 지적했듯이, 사이트가 LLM 학습에 사용되지 않도록 하는 가장 확실한 방법은 login required(로그인 필수) 사이트 설정을 활성화하여 사이트에 대한 익명 접근을 방지하는 것입니다. 사이트를 더 강화하기 위해, 사이트의 사용자가 봇이 아니라 인간일 가능성을 높이기 위한 조치를 취할 수 있습니다. 이를 위한 하나의 가능한 접근 방식은 Gitcoin Passport와 같은 서비스를 사이트의 인증 시스템과 통합하는 것입니다. Discourse용 오픈소스 Gitcoin Passport 플러그인이 곧 개발될 것이라고 생각합니다.
사이트의 사용자가 인간일 가능성을 높이는 덜 기술적인 다른 방법들도 있을 수 있습니다. 예를 들어, 사이트를 invite only(초대 전용)으로 설정하고, 인간이라고 믿을 만한 이유만 있는 사용자에게만 초대장을 보내도록 조치를 취할 수 있습니다.
이 모든 것 뒤에 숨겨진 철학은 매우 흥미롭다고 생각하지만, 이 주제에서는 이에 대해 깊이 다루지 않겠습니다.
이 주제에 대해 깊고 진지하게 논의하려는 제 시도가 계속 검열되는 것에 대해 저는 단호히 반대합니다. '느린 스틱’은 그냥 농담이죠, 매번 1시간씩 기다려야 한다는 건 말이 안 됩니다.
많은 사용자들의 방황하는 글들이 여전히 남아 있는 반면, 일관성은 없고 편향은 있는 것 같습니다. 지금까지 제 눈에 비친 바로는 그렇습니다. 저는 개인적으로 받아들이지 않지만, 고령의 관리자들에 의한 검열은 적어도 말 그대로 말막기를 하고 있습니다.
저는 이 매우 심각하고 중대한 상황을 해결하기 위해 노력하고 있을 뿐인데, 마침 @simon 님으로부터 훌륭하고 진지한 게시글이 올라왔습니다.
정말 훌륭하고, OP(게시글 작성자)와 다른 사람들이 가장 먼저 듣고 싶었던 내용 그 자체입니다. 방대한 관리자 섹션에는 수많은 옵션이 숨어 있는데, 저는 이 기능/옵션을 이전에 인지하지 못했습니다. 이제 테스트해 볼 수 있으니, 기본 카드보다 더 많은 사용자 지정 정보를 담을 수 있으면 좋겠습니다. 사용자 지정 텍스트로 처리하는 방법도 있을까요? 아는 분 계신가요?
정말 감사합니다. 
이 기사가 사실이라면
사이트를 공개 인터넷에서 제거하거나, Google을 차단하거나, login_required를 활성화해야 합니다.
크롤러가 robots.txt을 준수해야 한다는 법적 의무는 전혀 없으며, 사용자 에이전트를 위조하는 것은 매우 쉽다는 점을 주목할 필요가 있습니다. 이러한 행위를 규제하는 법률도 존재하지 않습니다. 시급성이나 심각성의 정도가 아무리 높아도 이 사실은 변하지 않습니다. 데이터가 사용되는 것에 대해 우려된다면, 사이트를 비공개로 전환한 후 학습 데이터와 관련된 다양한 법적 절차의 결과를 기다리는 것만이 할 수 있는 일입니다.
광고에 의존하는 사이트들은 매출 감소가 있을 것으로 예상되며, 유료 구독 모델(paywall) 뒤로 숨겨진 콘텐츠가 훨씬 더 많이 나타날 것입니다. 무료 및 공개 인터넷의 품질이 희석될 것입니다.
Discourse는 이 트렌드를 활용해 호스팅 고객들을 위한 구독 서비스를 구축함으로써 실제로 이 기회를 활용할 수 있을 것입니다.
호스팅 플랜의 일부 등급에서 사용할 수 있는 구독 플러그인이 이미 존재합니다. 셀프 호스팅 사이트에서는 이미 이를 도입할 수 있습니다.
콘텐츠를 숨기는 것의 문제는 SEO에 부정적인 영향을 미칠 수 있다는 점이며, 이는 새로운 사용자 유입 경로에 따라 달라질 수 있습니다.
저는 개인적으로 검색을 통해 새로운 사용자를 확보하므로, 계정 로그인 벽 뒤에 콘텐츠를 아주 소량만 배치합니다.
많은 사이트의 경우, 여전히 검색에서 발견되어야 합니다!
agemo 님, 저는 두 가지 관련 있는 우려가 있는 것 같다고 봅니다. 하나는 소프트웨어에서 AI의 사용이고, 다른 하나는 일반 사람들의 웹 상호작용이 AI 학습에 사용될 수 있다는 점입니다. 님은 이 두 가지에 대해 꽤 우려하고 있으며, 이런 일이 일어나지 않기를 원하시는 것 같습니다.
저도 그 마음을 이해합니다. 이런 우려는 많은 사람들이 공유하고 있을 것이라고 생각합니다.
제가 말씀드리고 싶은 것은, 세상에는 제가 우려하고 바꾸고 싶은 것들이 많이 있지만, 여기 있는 사람들이나 Discourse라는 서비스로 해결할 수 없는 문제들이라 이곳에서 언급하지 않는다는 것입니다. 계속 언급한다면 귀찮게 느껴질 수 있고, 제가 조정(moderation)을 받을 수도 있을 것입니다.
아마 님은 자신의 목소리가 들리지 않는다고 느끼실 수 있습니다. 하지만 이 스레드에서 실제로 일어나고 있는 일은, 이 스레드의 다른 사람들이 님의 우려가 실행 가능한 문제가 아니라고 생각한다는 것입니다. 여기에서, 또는 그 사람들이 해결할 수 있는 문제가 아니라는 뜻입니다. 무언가를 할 수 있는 방법은 있을 수 있지만, 그것은 여기의 개인들이 할 수 있는 일이 아닙니다. 아마 답은 대중 운동, 캠페인, 혹은 혁명일 수 있지만, 여기의 관리자들이 그런 것들이 주제에서 벗어났다고 느끼는 것은 당연하다고 생각합니다.
이미 일이 벌어진 것입니다. 우리가 바꿀 수 없는 것, AI는 이제 해방되어 이 사건 자체가 되었습니다. 저는 시간을 되돌릴 수 있다고 제안한 적이 없습니다.
관리자들은 이 주제를 이해했다고 생각하지만 그렇지 않으며, 계속해서 제 기여물을 수정(모더레이션)합니다. 해결책 대신 모더레이션에 대해 말하는 것이 지루하지만, 그들은 계속 그렇게 하거나 다른 사용자들에게도 그렇게 합니다. 아마도 가치를 인식하지 못하거나 너무 안일하기 때문일 것입니다.
현실은 제 개입으로 이 주제를 더 솔루션 중심의 초점으로 가져오려 했음에도, 어색한 모더레이션에도 불구하고 일부 성과가 있었다는 것입니다.
당신은 아무것도 할 수 없다고 생각할 수 있지만, 그것을 보고 인식하는 것:
a) 그것이 심각하다는 것
b) 그것이 시급하다는 것
c) 그것이 집중이 필요하다는 것
이것은 시작이며, 당신은 당신의 반응에 대한 통제권을 가지고 있지만, 이미 발생하여 과거가 되었으며 가시적인 미래까지 현재를 매일 영향을 미치는 사건 자체에는 통제가 없습니다.
다른 문제들을 위해 파생된 해결책을 대충 사용하는 것 외에는 제안된 해결책이 없으며, 따라서 이 명제를 깨뜨립니다. AI 사건은 사람들에게 사건 시점까지의 모든 노력을 깨뜨리는 입장을 취하도록 강요하기 때문입니다.
당신의 콘텐츠가 그 시점까지의 모든 노력에 대한 직접적인 경쟁으로 이용될 직접적인 위협이 되는 것의 일부가 되고 싶지 않은 것은 매우 자연스러운 일입니다. 하지만 거기서 끝나지 않습니다.
저는 이 모든 것을 하나의 단순한 수사적 질문으로 요약하겠습니다 (이것이 수사적인지 아닌지는 논쟁할 수 있지만, AI를 인정해야 합니다).
지금 왜 누가 discourse(또는 유사한 것) 인스턴스를 배포하는 것을 고려하겠습니까?
이 문제에는 많은 우려가 있으며, 때로는 하나의 주제(OP)가 문제의 결과의 전체 우주를 예시합니다. 그리고 이것은 분명히 그런 경우입니다. 이것은 너무 좁아져서는 안 되며, 특히 Discourse가 제공할 실질적인 해결책이 없을 때 더욱 그러합니다. 그러면 그 주제는 그 맥락의 본질상 완전히 열려 있어야 하거나, 아니면 "이 문제에 대한 해결책이 없으므로 이 주제는 이제 닫힙니다"라고 선택해야 합니다.
열거나 닫거나.
이것을 이해하고 있습니까?
이것이 핵심입니다. 이 문제를 해결할 의지가 없다는 인식이 있다면 그렇게 하십시오. 그렇지 않으면 이 주제는 남아 있어야 하며 매우 넓어야 합니다. 이것이 이 주제에 필요한 모더레이션 완화의 수준이며, 왜냐하면 이것은 처녀지(미개척지)이기 때문입니다.
설정에 그것을 수정하는 체크박스 하나나 두 개가 있다면 우리는 모두 집으로 갈 수 있겠지만, 아직 실제로는 없습니다. 몇 가지 임시 조치가 있을 수 있지만, 그것들은 "해결됨"의 영역에 있지 않습니다. 그점에 대해서는 모두가 동의할 것입니다.
OP의 우려와 AI 문제, 그리고 관리자가 그것을 관리해야 하는 방식에 대한 직접적인 대응으로 해결책이 구축되지 않았으므로, 제 주장들은 유효합니다.
해결책이 있다면, 그것들을 지적해 주십시오. 여기나 개발 중인 해결책이나 다른 것을 게시하십시오. 이해하고 있습니까?
그 안에 책임이 있습니다. 개발자의, 사용자의, 그리고 그것을 모두 작동시키는 기존 관계의 책임입니다. 그래서 우리는 그것을 논의합니다. 필요하면 반복해서.
제가 보는 것은, OP가 5월에 시작되었을 때부터 최근 몇 개의 게시물까지 이것이 어떻게 깨뜨리는지에 대한 인식이 제로라는 것입니다. 그리고 저는 그것을 축하했지만 모더레이션 당했습니다. 그것은 농담입니다. AI는 실제로 네트워크를 다시 깨뜨리고 있으며, 왜 discourse나 유사한 플랫폼을 설정하는 데 노력을 기울여야 합니까? 주제의 요구에 부합하는 진지하고 진정한 그리고 견고한 방식으로 그것을 논의할 수 없다면, 그것이 당신의 답입니다.
시장은 움직이고 있으며, 모든 돈, 시선, 광기는 OpenAI & Co의 주머니로 굴러 떨어지고 있습니다. 저는 여기의 개발자들이 다른 모든 곳에서처럼 AI의 완전한 채택과 통합을 선택하고 있으며, 아무런 신중함도, 제로! 하고 있는 것을 봅니다.
이것이 그런 OP가 왜 구석진 곳으로 몰리고 좌절스러운 이유입니다. 당신의 discourse를 깨뜨리는 것이 유일한 확실한 해결책입니다. 그것은 해결책이 아닙니다. 그것은 사실상 게임 오버입니다.
개발자들이 AI에 어떻게 반응하는지에 대한 제 비유, 수사적으로: 거의 모든 사람들이 화산 폭발(사건이 되는 것)에서 흘러나오는 라바를 모으기 위해 모든 종류의 멋진 양동이를 만드는 데 바빠 보입니다. 양동이를 만드는 반응, 라바는 화산 신의 선물이며, 그것은 열과 빛을 가져다줍니다. 그렇습니다. 하지만 그것은 또한 매우 빠르게 물질을 태우며, 양동이 없다면 당신이 가진 부분을 통제할 수 없지만, 양동이는 이 사실을 숨깁니다. 그것은 안전하고, 시원하고, 깔끔해 보입니다. 지금은.
아니요. 그것은 정확하지 않을 것입니다. 저는 모더레이터들이 어떻게 잘못되었고 그것이 그들이 인정한 것보다 훨씬 더 심각하며, 이것이 Discourse와 AI 간의 관계의 상향식(하향식) 위치의 다소 실망스러운 증후일 수 있다고 개요를 짰습니다. 그것은 “에이” 또는 "어깨를 으쓱"하는 것처럼 느껴지지만, 감정은 틀릴 수 있으므로 사실로 저를 틀렸다고 증명하십시오.
몇몇 사람들은 제 지점을 이해했거나, 적어도 OP를 더 열심히 살펴보고 몇 가지 더 나은 기여를 했으며, 저는 그것이 매우 대충 만들어진 다중 포인트 해결책의 몇 가지 잠재적인 경로로 저를 이끌었기 때문에 감사합니다. 여전히 진행 중이며, AI가 제기한 요구에 더 잘 매핑하기 위해 개발자들의 몇 가지 인식을 필요로 하며, 그것을 실행 가능한 라이브로 더 좋게 만들지만, 여전히 임시 조치입니다.
온라인 포럼에게 지난 10년은 트래픽에서 수익 감소까지 힘든 시간이었습니다. 이 사건의 함의는 그 실망의 차트를 깨뜨리며, 많은 운영자들에 대해서는 단순한 폐업과도 같은 최종 종말 사건을 의미할 수 있습니다.
특정 주제에 대한 토론을 하고 싶어서 사람들이 모여 그 주제에 대해 논의할 수 있는 포럼을 운영하고 있습니다. 저는 Discourse를 선택했지만, 제 생각에는 공개 웹(open web)의 다른 어떤 솔루션이든 동일한 위험과 동일한 결과를 낳을 것입니다. 제 토론이 공개 웹에 존재하고 검색 결과에 표시되기를 원합니다.
사람들은 Telegram이나 Signal과 같은 프라이버시 중심 플랫폼에서도 상호작용을 하고 실제로 그렇게 하고 있지만, 그것들은 다른 목적으로 구축된 다른 종류의 서비스입니다. Discourse 채팅이 원하시는 것 중 일부를 제공할 수 있을 수도 있지만, 마침 저는 그것에 관심이 없습니다.