ChatGPT 같은 LLM 학습에 커뮤니티 콘텐츠가 사용되지 않도록 막는 방법?

네, 이건 매우 포괄적인 수사학적 지점이고, 저는 당신이 그 함의를 놓쳤다고 생각합니다.

대담하게 말하자면, 당신의 논리적 과정은 현재 AI/ChatGPT 버전 이전의 시기에 수행되었을 것이며, 그건 바로 옛날의 정상적인 공간이 행진하던 시절이었을 겁니다.

오늘날 같은 공간에 있는 사람들은 AI라는 새로운 주목을 끄는 패러다임 전환의 쇼를 보고 있습니다. 이 쇼는 잠재력과 결과 모두에서 무한한 X-팩터를 약속하는 것처럼 보입니다.

AI가 모든 것에 접근할 수 있었다면, 과거의 의사결정을 뒷받침했던 모든 이전 활동과 가정은 무효가 됩니다. 그리고 온라인에서 발견되는 일화적인 증거들은 AI를 공급하기 위한 데이터 스크래핑이 3년, 어쩌면 5년 이상 지속되어 왔음을 시사합니다. DeepMind의 경우, Google이 인수한 2014년쯤으로 거슬러 올라갈 수도 있죠 (로그 샘플의 법의학적인 분석이 이를 증명할 수도 있고, 아니면 이를 방지하기 위해 은폐되었을 수도 있습니다). 이 요소를 상대적으로 사실이라고 가정하면, 기술적 리드타임 측면에서 문제가 얼마나 뚜렷한지 볼 수 있습니다.

모든 콘텐츠가 스크랩되어 이미 늦었을 수 있지만, 저는 그 부분을 제 우려와 표현에 반영했으며, 제가 말했듯이 여기에는 시간여행 같은 해결책은 없습니다. 오직 현찰과 미래의 해결책을 알리는 신중함의 힘만 있을 뿐입니다.

죄송합니다, 그걸 이해할 수 없어요.

그 질문의 함의는, 현재 AI(ChatGPT 기반 기술)가 수많은 필요에 대해 다른 어떤 솔루션보다도 뛰어난 것으로 인식되는, 매력적인 새로운 선택지가 등장했다는 것이다.

LLM이 사람들이 포럼에서 원하는 모든 것을 제공하기 때문에 아무도 포럼을 세팅하지 않겠다고 말씀하시는 건가요? (참고로 이 스레드의 주제는 아닙니다.)

(사람들이 당신을 위해 무언가를 해달라고 원하신다면, 당신이 문제가 무엇이라고 생각하는지, 그리고 그들이 당신을 위해 무엇을 할 수 있다고 생각하는지 명확히 말씀하셔야 한다고 생각합니다. 당신이 이 문제에 대해 깊은 관심을 가지고 있다는 것은 알지만, 당신이 정확히 무엇을 원하는지는 알 수 없습니다. 누구에게나 시간과 에너지에는 한계가 있기 때문에, 당신의 생각을 파악하는 데 큰 노력을 기울이지는 않을 것입니다.)

추가로 수정하여 덧붙임:
[details=“이 스레드의 현재 “AI” 요약, 후세를 위해”]

ChatGPT와 같은 언어 모델 훈련에 커뮤니티 콘텐츠가 사용되는 것을 방지하기 위한 포럼 토론은 로그인 요구를 통해 콘텐츠를 비공개로 만들거나, robots.txt 또는 Discourse의 차단된 크롤러 사용자 에이전트 설정을 통해 스크레이퍼를 차단하거나, 사이트를 아예 공개 인터넷에서 제거하는 것에 중점을 두고 있습니다. 일부는 공개 데이터 사용 방지에 반대하며 이것이 진보의 불가피한 일부라고 믿는 반면, 다른 이들은 콘텐츠 제작자가 자신의 작품이 어떻게 사용되는지에 대해 더 많은 통제권을 가져야 한다고 주장합니다. 이 토론은 정보와 창의성에 대한 소유권의 철학적 문제를 탐구하고, AI 시스템이 데이터를 사용하는 것을 완화하기 위한 실용적인 팁도 제공합니다.
[/details]

4개의 좋아요

대부분이 견디기 어려운 새로운 이유가 갑자기 생겨, 기존의 방식을 선택하지 말아야 할 이유가 되었습니다.


저는 원글 작성자(OP)는 아니지만, 이제 더더욱 OP에게 공감합니다.

  1. 아무도 진지하게 받아들이지 않았던 OP를 진지하게 대하고,

그리고

  1. '왜(Why)'의 문제는, 이러한 모든 사건들이 깊은 긍정적 및 부정적 영향을 미치는데, 저는 단점들에 대한 진지한 인식은커녕, 인식된 장점들에 대한 편향만 감지됩니다. 따라서 이를 평가하고 완화하기 위한 활동, 즉 플랫폼 차원에서 영향을 받은 사람들을 지원하는 활동이 전혀 없습니다.

다시 말하지만, 저는 OP가 아니지만 OP의 문제는 모든 공개 토론의 문제입니다. 또한 이는 인터넷에 대한 체계적인 존재론적 위협이며, 플랫폼에 구애받지 않습니다. 혹은

그냥 실용적으로 놀아볼 "멋진 새로운 장난감"에 불과할지도 모릅니다.

후자의 태도는 이 맥락에서 진지하지 않습니다. 이는 의도적으로 무지한 것입니다. 저는 개인적으로 이를 무책임하다고 생각합니다. 바로 이것이 AI 패러다임을 더욱 위험하게 만드는 이유입니다.

단일 주제만으로는 이를 해결할 수 없으며, 이는 리더십의 문제입니다. 저는 @sam과 @codinghorror에게부터 시작했는데, 그때 모든 모더레이션(관리)의 재앙이 시작되었습니다. 한 번 했다고 악용한 것은 아니지만, 여러분도 아시다시피 다른 사람들은 더 잘 안다고 생각하며, AI가 정말로 발톱을 드러낼 때까지 기다려 보십시오. :melting_face:

결론: 이 문제는 매우 진지하게 다뤄져야 합니다.

따라서 별도의 카테고리가 필요할 수도 있습니다. 그 정도 규모의 문제이기 때문입니다.

솔루션에서 너무 멀어, 이건 해결책이라기보다는 문제를 악화시키는 것일 수 있습니다. 전략이 login_required 설정으로 문을 잠그는 것이라면, 검색 트래픽에 의존하는 경우 부정적인 트래픽 감소 효과를 완화하려면 일부 콘텐츠는 볼 수 있지만 전부 볼 수 없는 구조가 필요합니다.

WP 프론트엔드 / Discourse login_required 사이트
(추가 작업, 호스팅 비용, 지원 등 더 많은 리소스 필요)

이 문제를 정확히 염두에 두고 설계된 것은 아니지만 도움이 될 수 있는 것들:

공개된 페이지(Published Pages): 전용 목록 페이지로 개발하고, 몇 가지 설정 옵션을 제공하면 사용자가 일부 공개 프론트 콘텐츠를 보고 더 읽으려면 가입을 유도하는 브리징 랜딩 페이지 역할을 할 수 있습니다.

– /pub에서 공개된 페이지 목록을 자체 페이지로 허용 (홈페이지로 설정 가능)
– login_required 페이지에 공개된 페이지 목록을 허용
– login_required 페이지에서 사용자 정의 카테고리 또는 최신 게시물을 허용

저는 이 문제를 해결하기 위해 노력하던 중 며칠 전에 **공개된 페이지(Published Pages)**라는 기능을 발견했습니다. 제 기억이 맞다면 AI 난제 이전에도 이전 사용자들이 공개된 페이지에 대한 유사한 목록 기능을 요청한 적이 있습니다.

공개된 페이지를 더 유연하게 구성할 수 있도록 하는 것이, 공개적으로 노출되는 연결 지점을 해결해야 할 경우 전체 WP 프론트엔드를 붙이는 것보다 더 바람직하다고 생각합니다.

토론 첫 게시물만 목록에 표시(List Topic First Post only)

모든 토론의 첫 게시물만 표시하고, 댓글을 읽으려면 로그인을 요구합니다. 유사한 제안이 최소 한 번은 본 적이 있으며 당시에는 반대 표를 던졌지만, 이 맥락에서는 재평가이 필요합니다.

또한 이 제안들을 불완전한 목록으로, 문제의 일부(전체가 아님)에 대한 잠재적인 임시 조치로만 간주해 주세요.


그동안 이 토론에 수많은 감정으로 공포를 퍼뜨리러 돌아올게요 :slight_smile: How are we all feeling about ChatGPT and other LLMs and how they'll impact forums?

1개의 좋아요

지난 답변을 보면, 공개 콘텐츠와 비공개 콘텐츠를 혼합하여 이 문제를 해결한다는 점에서 우리도 거의 같은 결론에 도달하고 있는 것 같습니다. 아래 게시글은 당신의 답변을 읽기 전에 작성한 것입니다. 그래도 논거를 뒷받침하기 위해 게시하겠습니다.

저도 첫 번째 게시글(OP)을 진지하게 받아들이고 있습니다. 이는 합법적인 질문을 하고 있기 때문이기도 하고, LLM이 인터넷에 미칠 영향에 대해 작성자와 비슷한 우려를 가지고 있기 때문이기도 합니다. 당신의 우려를 제가 올바르게 이해했다면, 인터넷이 작동하는 방식에 근본적인 변화가 일어나고 있다는 데 동의합니다. 사람들이 사이트를 직접 방문하는 대신, LLM이 인터넷의 공개 부분에 상호작용하기 위한 주요 인터페이스가 될 것입니다. 이 변화에는 여기서 유용하게 다룰 수 없는 다양한 함의가 있을 것입니다.

여기서 다룰 수 있는 질문은 LLM 학습에 Discourse 콘텐츠가 사용되는 것을 어떻게 방지할 것인가입니다. Discourse는 몇 가지 가능한 접근 방식을 제공합니다.

첫 번째 접근 방식은 약한 것입니다 - 사이트를 공개적으로 유지하면서 blocked crawler user agents 사이트 설정을 사용하여 데이터를 스크래핑하는 데 사용되는 사용자 에이전트를 차단하는 것입니다. 이 조치와 함께, 데이터를 스크래핑하는 기술 기업에 대한 법적 대응에도 참여할 수 있습니다.

더 강력한 접근 방식은 사이트 전체 또는 일부 영역을 비공개로 설정하는 것입니다. 이는 login required 사이트 설정이나 카테고리 보안 설정을 통해 수행할 수 있습니다.

위 접근 방식에 대해 제가 보는 주요 반론은 사람들이 자신의 사이트가 검색 엔진에 의해 발견되기를 원한다는 것입니다. 이 문제를 해결할 수 있는 방법이 있을 것이라고 추측합니다. 가장 쉬운 방법은 비공개 Discourse 포럼과 연결된 공개적이고 SEO 최적화된 블로그를 운영하는 것입니다. 더 복잡한 해결책은 Discourse가 주제(OP)의 일부를 공개적으로 표시하면서, 주제의 대부분은 Discourse 그룹의 멤버만 접근할 수 있도록 하는 기능을 제공하는 것입니다. 이는 유료 구독자에게만 콘텐츠를 제공하는 Substack과 같은 서비스가 콘텐츠를 처리하는 방식과 유사합니다. 이들은 익명 사용자와 크롤러가 접근할 수 있는 일부 콘텐츠를 표시한 후, 가입 CTA를 표시합니다:

따라서 LLM이 인터넷에 미칠 영향에 대한 제 우려와 함께, 콘텐츠 제작자를 위한 새로운 자금 조달 방식을 살펴볼 기회도 보고 있다고 할 수 있습니다.

7개의 좋아요

이 설정은 어디에 있나요?

2개의 좋아요

질문은 "공개 인터넷에 올릴 수 있는 것을 왜 누가 만들까요?"입니다.

공개 인터넷에서 질문을 하면, 당신의 견해에 동의하는 사람은 당신의 질문에 답할 수 없습니다.

6개의 좋아요

이 주제는 지루합니다. AI 기반 요약을 확인해 보세요. 주제를 충분히 잘 요약하고 있으니, 맨 위로 스크롤하여 클릭해 주세요.

다음 3개월간 이 주제를 닫습니다.

12개의 좋아요

이 주제는 90일 후 자동으로 생성되었습니다.