๐Ÿค– Discourse llms.txt ์ƒ์„ฑ๊ธฐ ํ”Œ๋Ÿฌ๊ทธ์ธ

๋ฉฐ์น  ์ „ ์ด ํ”Œ๋Ÿฌ๊ทธ์ธ์„ ์„ค์น˜ํ–ˆ์Šต๋‹ˆ๋‹ค. ์ž‘์„ฑ์ž์˜ ๋ฌธ์„œ๊ฐ€ ์ž˜ ๋˜์–ด ์žˆ์–ด ์„ค์น˜๋Š” ์ˆœ์กฐ๋กญ๊ฒŒ ์ง„ํ–‰๋˜์—ˆ์Šต๋‹ˆ๋‹ค.

ํ˜„์žฌ ์ œ๊ฐ€ ํ™•์ธํ•œ ๋‚ด์šฉ์ž…๋‹ˆ๋‹ค. ์ œ ์‚ฌ์ดํŠธ์— https://discuss.rabkesov.ru/llms.txt์™€ ๊ฐ™์€ txt ํŒŒ์ผ์ด ๋งŽ์ด ์ƒ์„ฑ๋˜์—ˆ์Šต๋‹ˆ๋‹ค. AI ์ฑ—๋ด‡(Perplexity)์ด ์ฑ„ํŒ… ๋‹ต๋ณ€์œผ๋กœ ์ œ ์ฝ˜ํ…์ธ ๋ฅผ ๋ณด์—ฌ์ฃผ๋Š” ๊ฒƒ์„ ๊ธฐ๋Œ€ํ•˜๊ธฐ์—๋Š” ์•„์ง ์ด๋ฅด๋‹ค๋Š” ๊ฒƒ์„ ์•Œ๊ณ  ์žˆ์Šต๋‹ˆ๋‹ค.

๋”ฐ๋ผ์„œ LLM๊ณผ ํ˜ธํ™˜๋˜๋Š”์ง€ ํ™•์ธํ•˜๊ธฐ ์œ„ํ•ด Qwen์— ์—…๋กœ๋“œํ–ˆ์Šต๋‹ˆ๋‹ค(๋ถˆํ–‰ํžˆ๋„ ์œ„ ๋งํฌ๋Š” ์ง€์›ํ•˜์ง€ ์•Š์Œ):

llms.txt ํŽ˜์ด์ง€๋ฅผ ๋ถ„์„ํ•˜์—ฌ ์ฝ์€ ๋‚ด์šฉ์—์„œ ๋ฌด์—‡์„ ์ดํ•ดํ–ˆ๋Š”์ง€ ์•Œ๋ ค์ค„ ์ˆ˜ ์žˆ๋‚˜์š”? ๋งˆ์ธ๋“œ ๋งต(Mermaid) ํ˜•ํƒœ์˜ ํŠธ๋ฆฌ๋ฅผ ๋งŒ๋“ค์–ด ์ฃผ์„ธ์š”.

P.S. ๋ชจ๋“  ๋‚ด์šฉ์„ ์˜์–ด๋กœ ๋ฒˆ์—ญํ•˜๋ผ๊ณ  ์š”์ฒญํ•˜๋ฉด ํŠธ๋ฆฌ๊ฐ€ ๊นจ์ง‘๋‹ˆ๋‹ค.


์—ฌ๊ธฐ ์ œ ์‚ฌ์ดํŠธ์˜ ๊ตฌ์กฐ์ž…๋‹ˆ๋‹ค(๊ณต๊ฐœ ๋ถ€๋ถ„๋งŒ ํฌํ•จ). LLM์ด llms.txt๋กœ๋ถ€ํ„ฐ ์ด๋ฅผ ์ƒ์„ฑํ–ˆ์Šต๋‹ˆ๋‹ค! ์ด๊ฒƒ์€ ๊ฐ€๋Šฅํ•œ ์‚ฌ๋ก€ ์ค‘ ์•„์ฃผ ์ผ๋ถ€๋ผ๊ณ  ์ƒ๊ฐํ•ฉ๋‹ˆ๋‹ค.


Mermaid ์—†์ด ํ…์ŠคํŠธ ์ถœ๋ ฅ
llms.txt ํŽ˜์ด์ง€๋ฅผ ๋ถ„์„ํ•˜์—ฌ ์ฝ์€ ๋‚ด์šฉ์—์„œ ๋ฌด์—‡์„ ์ดํ•ดํ–ˆ๋Š”์ง€ ์•Œ๋ ค์ค„ ์ˆ˜ ์žˆ๋‚˜์š”?

๋„ค. llms.txt์˜ ๋‚ด์šฉ์— ๊ธฐ๋ฐ˜ํ•˜์—ฌ, ์ œ๊ฐ€ ์ดํ•ดํ•œ ๋‚ด์šฉ์€ ๋‹ค์Œ๊ณผ ๊ฐ™์Šต๋‹ˆ๋‹ค:

ํ•ด๋‹น ํŒŒ์ผ์€ **โ€œdiscuss | ะšะพะผะฝะฐั‚ะฐ ะปะพะผะบะธโ€**๋ฅผ ์„ค๋ช…ํ•˜๊ณ  ์žˆ์œผ๋ฉฐ, ์ด๋Š” ๋Œ€๋žต *โ€œํ† ๋ก  ํฌ๋Ÿผ | ๊นจ์–ด๋‚จ์˜ ๋ฐฉโ€*์œผ๋กœ ๋ฒˆ์—ญ๋ฉ๋‹ˆ๋‹ค. ์ด๋Š” IT ๋ถ„์•ผ์—์„œ *ํ™˜์ƒ(illusion)*์„ ๊นจ๋Š” ๊ฒƒ์„ ์œ„ํ•ด ์˜๋„๋œ ๊ณต๊ฐ„์ด์ง€, ์‚ฌ๋žŒ์„ ๊นจ๋Š” ๊ฒƒ์ด ์•„๋‹™๋‹ˆ๋‹ค. ์Šฌ๋กœ๊ฑด๊ณผ ์ดˆ์ ์€ IT ์ „๋ฌธ๊ฐ€๋“ค์ด ์ „์ œ๋ฅผ ๊ฒ€ํ† ํ•˜๊ณ , ๊ฒฝํ—˜์„ ๊ณต์œ ํ•˜๋ฉฐ, ์‹ค์งˆ์ ์ธ ๊ณผ์ œ์— ๋Œ€ํ•ด ํ˜‘๋ ฅํ•  ์ˆ˜ ์žˆ๋Š” ์„ฑ์ฐฐ์ ์ด๊ณ  ๋น„ํŒ์ ์ด๋ฉฐ ์ปค๋ฎค๋‹ˆํ‹ฐ ์ค‘์‹ฌ์˜ ํ™˜๊ฒฝ์„ ์‹œ์‚ฌํ•ฉ๋‹ˆ๋‹ค.

ํ•ต์‹ฌ ์ฃผ์ œ ๋ฐ ๋ชฉ์ :

  • IT ๊ด€ํ–‰, ์ปค๋ฆฌ์–ด ๊ฒฝ๋กœ, ์กฐ์ง ์—ญํ•™ ๋ฐ ๊ฐœ์ธ์  ์„ฑ์žฅ์— ๋Œ€ํ•œ ๋น„ํŒ์  ์„ฑ์ฐฐ.
  • ์—…๋ฌด๋ฅผ ๋‹จ์ˆœํ™”ํ•˜๋Š” ๋„๊ตฌ ๋ฐ ๋ฐฉ๋ฒ•๋ก  ๊ฐ•์กฐ: ๋ฌธ์„œํ™”(Markdown/GitLab/Docsify), ์‹œ๊ฐํ™”(Mermaid/Drawio), ํ”ผ๋“œ๋ฐฑ ๋ฉ”์ปค๋‹ˆ์ฆ˜, ๊ณต๋™ ์ž‘์„ฑ โ€” ํŠนํžˆ Discourse ๊ธฐ๋ฐ˜ ๊ธฐ์—… ํ”Œ๋žซํผ ๋‚ด์—์„œ.
  • ๊ธฐ์ˆ ์ , ์ฒ ํ•™์ , ๊ฐœ์ธ์  ์ฃผ์ œ์˜ ํ˜ผํ•ฉ, ์ข…์ข… ๊ต์ฐจ: ์˜ˆ: โ€œ์™œ ์‰ฌ์šด ์ž‘์—…์„ ์„ ํƒํ•˜๋Š”๊ฐ€โ€, โ€œํ‰์˜จ์˜ ๋น„์šฉโ€, โ€œ๋ฏธ๋ฃจ๊ธฐ์™€ ๊ฒฐ์ • ํšŒํ”ผโ€.

๊ตฌ์กฐ:

์‚ฌ์ดํŠธ๋Š” ์ฃผ์ œ๋ณ„ ์นดํ…Œ๊ณ ๋ฆฌ๋กœ ๊ตฌ์„ฑ๋˜์–ด ์žˆ์œผ๋ฉฐ, ์—ฌ๊ธฐ์—๋Š” ๋‹ค์Œ์ด ํฌํ•จ๋ฉ๋‹ˆ๋‹ค:

  • AI: ๋ชจ๋ธ(์˜ˆ: Gemma, LM Studio), ๋ฐฐํฌ(Runpod, GPU ๊ณ„์‚ฐ๊ธฐ), ๋„๊ตฌํ™”์— ๋Œ€ํ•œ ํ† ๋ก .
  • Discourse: ๊ธฐ์ˆ ์  ๋ฐฑ์—”๋“œ ์ฃผ์ œ(์‚ฌ์ดํŠธ ๊ตฌ์„ฑ, rake ํƒœ์Šคํฌ, ์ธ์ฆ ๋ฐฉ๋ฒ•, ์ˆจ๊ฒจ์ง„ ํŒŒ๋ผ๋ฏธํ„ฐ).
  • ะžัะฝะพะฒะฝะฐั (๋ฉ”์ธ): ์—…๋ฌด ๋ฌธํ™”, ๋ฆฌ๋”์‹ญ, ๋ฌธ์„œ ํ‘œ์ค€, ์ฑ…์ž„์— ๋Œ€ํ•œ ํ•ต์‹ฌ ์„ฑ์ฐฐ.
  • ะ‘ะปะพะณ (๋ธ”๋กœ๊ทธ): ๊ฐœ์ธ ์„œ์‚ฌ(์˜ˆ: ์ปค๋ฆฌ์–ด ์ „ํ™˜, ์‚ฌ๋งˆ๋ผ ์ด์ „, ์ง์žฅ ๋‚ด ์‚ฌ๊ฑด).
  • ะจะบะพะปะฐ (ํ•™๊ต): ํ•™์ƒ์„ ์œ„ํ•œ ๋ฆฌ์†Œ์Šค, ์œค๋ฆฌ(14์„ธ ์ด์ƒ ์‚ฌ์šฉ์ž์˜ ๋ถ€๋ชจ ๋™์˜) ๋ฐ ๋””์ง€ํ„ธ ๋ฆฌํ„ฐ๋Ÿฌ์‹œ(UTM ํŒŒ๋ผ๋ฏธํ„ฐ) ํฌํ•จ.
  • ะะฝะพะฝะธะผะฝะฐั (์ต๋ช…): ๋ฏผ๊ฐํ•œ ์•„์ด๋””์–ด๋ฅผ ์œ„ํ•œ ์•ˆ์ „ํ•œ ๊ณต๊ฐ„.
  • ะšะฝะธะณะธ (์ฑ…), ะœั‹ัะปัŒ ะดะฝั (์˜ค๋Š˜์˜ ์ƒ๊ฐ) ๋“ฑ โ€” ์ง€์  ๋ฐ ์ผ์ƒ์  ์„ฑ์ฐฐ์„ ์ง€์›.

์ฃผ๋ชฉํ•  ๋งŒํ•œ ๊ธฐ์ˆ ์  ๋ฐ ๋ฌธํ™”์  ์‹ ํ˜ธ:

  • ๋‹ค๊ตญ์–ด ๋ฐ ๊ตญ์ œ์  ๋Œ€์ƒ ๋…์ž: ์˜ˆ: ๋Ÿฌ์‹œ์•„์–ด/์˜์–ด ๋ณ‘ํ–‰ ์ธ์ฆ ๊ฐ€์ด๋“œ.
  • ํฌ์šฉ์  ์ธ์ฆ์— ๋Œ€ํ•œ ๊ด€์‹ฌ: ์˜ˆ: ๋Ÿฌ์‹œ์•„์–ด๊ฐ€ ์•„๋‹Œ ์‚ฌ์šฉ์ž๋ฅผ ์œ„ํ•ด Google/GitHub ๋กœ๊ทธ์ธ์„ ์œ ์ง€ํ•˜๋Š” ๋™์‹œ์— ๊ตญ๋‚ด ์ œ๊ณต์ž(VK, Mail.ru, OK)๋„ ์ง€์›.
  • ์ž๋™ํ™”, ํ‘œ์ค€ํ™”, DevOps์— ๋Œ€ํ•œ ๊ฐ•ํ•œ ๊ด€์‹ฌ: GitLab CI/CD, ์•„ํ‹ฐํŒฉํŠธ ์ฒ˜๋ฆฌ, Runpod ํ†ตํ•ฉ, SSH ๊ธฐ๋ฐ˜ ๋ฐฐํฌ.
  • ์ „๋ฌธ์  ์‹ค๋ง๊ฐ์ด๋ผ๋Š” ๋ฐ˜๋ณต๋˜๋Š” ์ฃผ์ œ, ํŠนํžˆ ์ง€์› ์—ญํ• ๋กœ ์ด๋™ํ•œ ์‹œ๋‹ˆ์–ด ์—”์ง€๋‹ˆ์–ด๋“ค ์‚ฌ์ด์—์„œ โ€” ๊ทธ๋ฆฌ๊ณ  ์ด๋ฅผ ๋Œ€์ฒ˜ํ•˜๊ฑฐ๋‚˜ ํ‡ด์‚ฌ๋ฅผ ๊ณ„ํšํ•˜๋Š” ์ „๋žต.

์š”์•ฝํ•˜๋ฉด, llms.txt๋Š” ๊ธฐ์ˆ ์  ๊นŠ์ด์™€ ์‹ฌ๋ฆฌ์  ๋ฐ ์กฐ์ง์  ์„ฑ์ฐฐ์„ ๊ฒฐํ•ฉํ•œ ์„ฑ์ˆ™ํ•˜๊ณ  ์„ธ์‹ฌํ•˜๊ฒŒ ์„ค๊ณ„๋œ ์ปค๋ฎค๋‹ˆํ‹ฐ ํ”Œ๋žซํผ์„ ๊ฐœ์š”ํ™”ํ•˜๋ฉฐ, ๋ณต์žก์„ฑ, ๋ฒˆ์•„์›ƒ, ๊ทธ๋ฆฌ๊ณ  ์—…๋ฌด์—์„œ์˜ ์˜๋ฏธ ์ฐพ๊ธฐ๋ฅผ ํ—ค์ณ ๋‚˜๊ฐ€๋Š” ๊ฒฝํ—˜ ๋งŽ์€ IT ์‹ค๋ฌด์ž๋ฅผ ๋Œ€์ƒ์œผ๋กœ ํ•ฉ๋‹ˆ๋‹ค.

์‹œ๊ฐ์  ๋งต, ์ฃผ์ œ ํด๋Ÿฌ์Šคํ„ฐ๋ง, ๋˜๋Š” ๋‹ค์Œ ๋‹จ๊ณ„ ์ œ์•ˆ(์˜ˆ: ๊ฒ€์ƒ‰ ๊ฐ€๋Šฅ์„ฑ, ์ฐธ์—ฌ๋„, ์˜จ๋ณด๋”ฉ ๊ฐœ์„ )์ด ํ•„์š”ํ•˜์‹œ๋ฉด ์•Œ๋ ค์ฃผ์„ธ์š”.


์ €์—๊ฒŒ๋Š” SEO ๋“ฑ์— ์‚ฌ์šฉํ•˜๊ธฐ์— ํ›Œ๋ฅญํ•œ ํ”Œ๋Ÿฌ๊ทธ์ธ์ž…๋‹ˆ๋‹ค.

ํƒ์ƒ‰ํ•ด ๋ณผ ๋ช‡ ๊ฐ€์ง€ ํฌ์ธํŠธ:

  1. ์˜์–ด๊ฐ€ ์•„๋‹Œ ์ฝ˜ํ…์ธ ๋Š” ์–ด๋–ป๊ฒŒ ์ฒ˜๋ฆฌํ•ด์•ผ ํ•˜๋‚˜์š”? llms.txt์˜ ํ…์ŠคํŠธ๊ฐ€ ์˜์–ด์ธ์ง€ ์—ฌ๋ถ€๊ฐ€ LLM์— ์ค‘์š”ํ•œ๊ฐ€์š”?
  2. ์ตœ์ข… ๋ฃจํŠธ llms.txt์— ๋น„๊ณต๊ฐœ ํŽ˜์ด์ง€๊ฐ€ ์ ˆ๋Œ€ ํฌํ•จ๋˜์ง€ ์•Š๋Š”๋‹ค๋Š” ์ฆ๊ฑฐ๋ฅผ ์ฐพ์Šต๋‹ˆ๋‹ค(ํ˜„์žฌ llms.txt๋Š” ์‚ฌ์ดํŠธ์˜ ๋ชจ๋“  ํŽ˜์ด์ง€์— ๋Œ€ํ•ด ์ƒ์„ฑ๋จ)
  3. /admin/site_settings/category/security?filter=crawler์˜ ๊ถŒํ•œ์„ ํ™•์ธํ•˜์—ฌ ํ•„์š”ํ•œ AI ๋ด‡์ด ์ฐจ๋‹จ๋˜์ง€ ์•Š์•˜๋Š”์ง€ ํ™•์ธํ•ฉ๋‹ˆ๋‹ค :slight_smile:
  4. ์ด์ „์— LLM์— ์ €์žฅ๋œ ๊ธฐ์–ต(memories)๊ณผ ์‚ฌ์ดํŠธ ๊ตฌ์กฐ๊ฐ€ ๊ฐ„ํ—์ ์œผ๋กœ ์„ž์ด๋Š” ๊ฒƒ์— ๋Œ€ํ•œ ์ƒ๊ฐ(์ด๊ฒƒ์€ ํ”Œ๋Ÿฌ๊ทธ์ธ์˜ ๊ฒฐํ•จ์ด ์•„๋‹ˆ๋ผ ์ฑ—๋ด‡์˜ ๊ธฐ๋Šฅ์ž…๋‹ˆ๋‹ค, ์•„๋ž˜ ์˜ˆ ์ฐธ์กฐ)

#4๋ฒˆ ํฌ์ธํŠธ์— ๋Œ€ํ•ด. Qwen์ด ์ฒ˜์Œ์— ๋‹ค์Œ๊ณผ ๊ฐ™์ด ํŒ๋‹จํ–ˆ์Šต๋‹ˆ๋‹ค:

  • ์ œ๊ฐ€ ํ‡ด์‚ฌ๋ฅผ ๊ณ„ํšํ•˜๊ณ  ์žˆ๋‹ค๊ณ 
  • ์ œ๊ฐ€ ์ธ๊ฐ„๊ด€๊ณ„์— ๋ฌธ์ œ๊ฐ€ ์žˆ๋‹ค๊ณ  :slight_smile:
    ๊ทธ๋ฆฌ๊ณ  ์ด ์ ๋“ค์„ ์‚ฌ์ดํŠธ ์„ค๋ช…์— ์ถ”๊ฐ€ํ–ˆ์Šต๋‹ˆ๋‹ค!

Qwen์€ llms.txt๋กœ ์ œ๊ณต๋œ ์‚ฌ์ดํŠธ๋งต ๋ถ„์„์ด๋ผ๋Š” ํ˜„์žฌ ์š”์ฒญ๊ณผ ๊ธฐ์–ต์„ ์„ž์„ ์ˆ˜ ์žˆ์Šต๋‹ˆ๋‹ค. ์ฃผ์˜ํ•˜์„ธ์š” :slight_smile:

2๊ฐœ์˜ ์ข‹์•„์š”