(kevin-kelly-68.t2t)
Gratitude will unlock all other virtues and is something you can get better at.
2025-08-04 Mon
11:04 ๋ชจ๋ธ
ollama pull nomic-embed-text
ollama pull bge-m3- nomic-embed-text A high-performing open embedding model with a large token context window.
- mxbai-embed-large
State-of-the-art large embedding model from mixedbread.ai embedding 335m 4.4M Pulls
- bge-m3
BGE-M3 is a new model from BAAI distinguished for its versatility in Multi-Functionality, Multi-Linguality, and Multi-Granularity.
DIFY ํ๋ฌ๊ทธ์ธ ์ค์ ๋ชจ๋ธ
๋ฐ๋ชฌ ์์ด ์งํํ๋ ๋ฐฉ๋ฒ ๊ณ ๋ฏผ - ๊ทธ๋ฌ๋ค๊ฐ
2025-08-05 Tue
07:49 ์ถ๊ทผ
TODO 10:35 ๋ฆฌ๋ญํฌ - ์ฌ๋ผ๋ง ์๋ฒ๋ง ๊ฐ์ง๊ณ ์ด๋ป๊ฒ ํ ์ ์๋๊ฐ?
Agentic RAG๋ฅผ ์ํ Jina Reranker v2: ์ด๊ณ ์, ๋ค๊ตญ์ด, ํจ์ ํธ์ถ & ์ฝ๋ ๊ฒ์
(Martens 2024)
- Jina Reranker v2๋ Agentic RAG๋ฅผ ์ํด ๋ง๋ค์ด์ง ์ต๊ณ ์์ค์ ๋ฆฌ๋ญ์ปค์ ๋๋ค. ํจ์ ํธ์ถ ์ง์, 100๊ฐ ์ด์ ์ธ์ด์ ๋ํ ๋ค๊ตญ์ด ๊ฒ์ ๊ธฐ๋ฅ, ์ฝ๋ ๊ฒ์ ๊ธฐ๋ฅ์ ์ ๊ณตํ๋ฉฐ, v1๋ณด๋ค 6๋ฐฐ ๋ ๋น ๋ฅธ ์๋๋ฅผ ์ ๊ณตํฉ๋๋ค.
TODO vllm ๋ฒ์ ์ฒดํฌ ํ ๊ฒ ์กฐ๋ง๊ฐ ๋ ๋ฏ - ์๋๋ฉด ๋น๋ ํ ๊ฒ
- pytorch - python312๋ก ํ์ธ
- vllm ๋ฒ์ ํ์ธ
- https://search.nixos.org/packages?channel=unstable&show=vllm&from=0&size=50&sort=relevance&type=packages&query=vllm
Dify Nixos Vllm Pytorch Unstable Check Version
(โDify Nixos Vllm Pytorch Unstable Check Versionโ n.d.)
vllm์
0.9.2 ๋ฒ์ ์ ๋ฆด๋ฆฌ์ฆ๋
ธํธ์ Sm120์ด ๋ค์ด์๋ค.
Hardware & Performance
NVIDIA Blackwell
SM120: CUTLASS W8A8/FP8 kernels and related tuning, added to Dockerfile (#17280, #19566, #20071, #19794)
SM100: blockโscaledโgroup GEMM, INT8/FP8 vectorization, deepโGEMM kernels, activationโchunking for MoE, and groupโsize 64 for Machete (#19757, #19572, #19168, #19085, #20290, #20331).
https://github.com/vllm-project/vllm/releases
์ต์ ๋ฒ์ ์ 0.10.0์ด๋ฉฐ 2์ฃผ์ ์ ๋ฆด๋ฆฌ์ฆ ๋์๋ค. ์๊ตฌ์ฌํญ์ pytorch 2.7.1 (์ต์ ๋ฆด๋ฆฌ์ฆ)์ด๋ค.
nixos๋ unstable์ vllm Version: 0.9.1, pytorch 2.7.1์ด๋ค.11:45 ํด๋ก๋์ฝ๋ ์์ด์ ํธ ์ํฐ๋๋ง
ํด๋ก๋์ - ํด๋ก๋์ฝ๋ ํ์ฉ ์ ํ๋ฆฌ์ผ์ด์
์ข์๋ฐ ์์กด์ฑ์ด ์๊ธฐ๋ ๊ฒ์ ์์น ์๋๋ค. ๋ค๋ง ๋ญ์ณ์ ๋ณด์ฌ์ฃผ๋๊น ์ข์๋ฐ? ์ ์ด๊ฒ ์๋์ง?
2025-08-06 Wed
07:30 ์์ํ์
์ค๋ ๋์ ๊ธ์ ์ข ์ผ๋ค. ์๋ฌด๋ ด ๋ญ๋ ์ฐ๋ ๊ฒ์ ํ๋ค๋ฅ ์ฝ์ง์.
์๊ฐ์ ํด๋ณด๋
- ๋๊ตฌ๋ n8n์ผ๋ก ๋ณธ์ธ์ ์ผ์ ์๋ํ ํ ์ ์๊ฒ ๋๊ณ ์ถ๋ค.
- ์ฌ๋ด์์ ์๊ธฐ ์ง๋ฌด์ ๋ง๋๋ก ๊ฐ์ฅ ์ฌ์ด ๋ฐฉ๋ฒ ๋๋ ์์ฃผ ์ ํต์ ๋ฐฉ๋ฒ์ ํฐ๋ฏธ๋์์ ํด๋ก๋ ์ฝ๋๋ฅผ ํ๋ ๊ฒ. ๊ทธ๋ฆฌ๊ณ ๋ชจ๋ํฐ์ ์ํฌํ๋ก์ฐ ์์ฑ์ ๋ณด์ฌ์ฃผ๋ ๊ฒ์ด๋ค.
- ๋ชจ๋์๊ฒ ์์ฃผ ์ ์ตํ ๊ฒ์ด๋ค. ๊ทธ๋ค ์ง๋ฌด์์ ์ด๋ ค์ด ๋ถ๋ถ์ ํ์ด์ฃผ๋ ๊ฒ์ด๋ค. ๋ณธ์ธ์ด ํด๋๊ฐ ๊ฒ์ด๋ค.
- ๊ทธ ์์ ์ ํ๊ณ ๋๋ฉด ํฃ์ ๋ณด๋ค ๊ณ ๋ํ๋ ์ผ์ ํ ์ ์๋ค.
- ๋๋ฌด๋ ์ฌ์์ ์ ๋ ์์ด๋ ๋ค ํ๊ฒ ๋ค๊ฐ ๋๋ฉด ๋๋ค.
- ๊ทธ๋ผ ์์ ๋ค.
DIFY๋ ๋ ธ๋ ์๋ํ๊ฐ ์๋๋ค๊ณ ํ๋ค
๋ฐ๋ผํ๊ธฐ๋ก ํด๋ณด๋ฉด ๋ ๊ฒ ๊ฐ๋ค.
nixos vllm 0.9.1 0.9.2 0.10.0
- rtx5080 ์ง์์ 0.9.2 ๋ฒ์ ์ด ํ์ํ๋ค. ๊ทธ๋ ๋ด.
TODO nixpkgs github fork
nixos unstable
- nixpkgs-unstable vs nixos-unstable ์ฐจ์ด์ :
- nixpkgs-unstable: ํจํค์ง ์ ๋ฐ์ดํธ๊ฐ ๋ ๋น ๋ฅด๊ฒ ๋ฐ์๋จ. Darwin(macOS) ํ ์คํธ ํต๊ณผ๋ง ํ์
- nixos-unstable: NixOS ์์คํ ์ ์ฒด ํ ์คํธ ํต๊ณผ ํ์. ๋ ์์ ์ ์ด์ง๋ง ์ ๋ฐ์ดํธ๊ฐ ์ฝ๊ฐ ๋๋ฆผ
fetch-upstream.sh
์์ฃผ ์ข์ ๋ฐฉ์
# 2025-08-06
### 10:21 instpector ๋๊ตฌ
````text
โ 1๋จ๊ณ: Inspector ๋๊ตฌ ํต์ฌ ๊ธฐ๋ฅ ์ค๊ณ
๋ฐฉ๊ธ ์ ์คํธ๋ฆฌ๋ฐ ์๋ต์ ๋ณด๋ฉด์ ์ธ๊ฐ์ด ์ค์ ๋ก ํ์ํ ์ ๋ณด๋ฅผ ํ์
ํ์ต๋๋ค:
์คํธ๋ฆฌ๋ฐ์์ ์ป์ ์ ์๋ ์ ๋ณด:
"node_id": "1754387691531",
"node_type": "knowledge-retrieval",
"title": "Knowledge Retrieval", // โ ์ด๊ฒ! UI์์ ๋ณด๋ ์ด๋ฆ
"status": "succeeded",
"inputs": "query": "...",
"outputs": "result": [...] // โ ์ด๊ฒ! ๋ค์ ๋
ธ๋์์ ์ธ ๋ณ์๋ช
Inspector ๋๊ตฌ๊ฐ ์ ๊ณตํด์ผ ํ ์ ๋ณด:
1. UI์์ ๋ณด๋ ๋
ธ๋ ์ด๋ฆ ("Knowledge Retrieval", "LLM")
10:33 ์ค์ผ์ด ์ธ์คํํฐ
๐ฏ Claude Code์์ ๋ฐ๋ก ์ฌ์ฉ ๊ฐ๋ฅํ ์ค์ ์๋ฃ
1. MCP ์๋ฒ ๋ฑ๋ก: ~/.claude.json์ dify-connect-mcp ์ถ๊ฐ๋จ
2. Inspector ๋๊ตฌ: inspect-workflow ๋๊ตฌ๊ฐ Claude Code์์ ๋ฐ๋ก ์ฌ์ฉ ๊ฐ๋ฅ
3. ํ๋ก์ ํธ ๋ฌธ์: PROJECT-STATUS.md์ ํํฉ๊ณผ ๋ค์ ๋จ๊ณ ์ ๋ฆฌ
๐ ๋ฌธ์ ๋ด์ฉ ์์ฝ:
ํ์ฌ ๋ฌธ์
- ์ํฌํ๋ก์ฐ ๋๋ฒ๊น
์ 80% ์ ๋ณด๋ก๋ 0% ์์ฐ์ฑ
- ๋
ธ๋ ID์ ๋ณ์๋ช
์ด ์ธ๊ฐ์๊ฒ ๋ถํฌ๋ช
1-3๋ฒ ๊ตฌํ ๋ชฉํ
1. โ
Goal 1 ์๋ฃ: Basic Workflow Inspector
2. ๐ง Goal 2 ๊ณํ: Enhanced Variable Mapping
3. ๐ Goal 3 ๊ฐ๋
: AI-Assisted Workflow Design
1๋ฒ ๊ตฌํ ๋ด์ฉ
- inspect-workflow MCP ๋๊ตฌ ๊ตฌํ
- ์คํธ๋ฆฌ๋ฐ ์๋ต ํ์ฑ์ผ๋ก ๋
ธ๋ ์ํ ์ถ์
- ์ธ๊ฐ์ด ์ฝ์ ์ ์๋ ์๋ฌ ์ง๋จ ์ ๊ณต
๋ค์ ํ ์ผ
- Knowledge Retrieval ๋
ธ๋ ์ถ๋ ฅ ์บก์ฒ ์์
- ๋ณ์ ์ฐธ์กฐ ๊ตฌ๋ฌธ ๋์ฐ๋ฏธ ์ถ๊ฐ
- ์๋ฌ ์ ์ ๊ฐ์
์ด์ Claude Code๋ฅผ ์ฌ์์ํ์ง ์๊ณ ๋ inspect-workflow ๋๊ตฌ๋ฅผ ๋ฐ๋ก ์ฌ์ฉํ ์ ์์ต๋๋ค!
ํ์ฌ ์ํฉ:
- โ Inspector ๋๊ตฌ ์์ฑ ๋ฐ ๋์ ํ์ธ
- โ ํต์ฌ ์ ๋ณด๊ฐ CONTEXT-SUMMARY.md, PROJECT-STATUS.md์ ์ ์ฅ๋จ
- โ MCP ์๋ฒ ์ค์ ์๋ฃ
๋ค์ ํต์ฌ ์์ :
- Knowledge Retrieval ๋ ธ๋ ์ถ๋ ฅ ์บก์ฒ ์์
- ๋ณ์ ์ฐธ์กฐ ๊ตฌ๋ฌธ ๊ฐ์
๋ชจ๋ ์ค์ํ ์ ๋ณด๊ฐ ๋ฌธ์์ ์์ ํ๊ฒ ์ ์ฅ๋์ด ์์ผ๋ฏ๋ก clear ๋ช ๋ น์ด๋ก ๋ํ๋ฅผ ์ ๋ฆฌํด๋ ๊ด์ฐฎ์ต๋๋ค.
์ ๋ฆฌ ํ์๋:
- CONTEXT-SUMMARY.md ์ฝ๊ธฐ
- Inspector ๋๊ตฌ ๊ฐ์ ์์ ๊ณ์
์ง์ค๋ ฅ ํฅ์์ ์ํด clear ํ์๊ธธ ์ถ์ฒํฉ๋๋ค! ๐ฏ
โ ์ข์ ์ง๋ฌธ์ ๋๋ค!
clear vs compact ์ฐจ์ด:
clear:
- ๋ํ ๋ด์ฉ์ ์์ ํ ์ญ์
- ๊นจ๋ํ ์ ์์
- ์ด์ ๋ํ ๋ด์ฉ ์ ๊ทผ ๋ถ๊ฐ
compact:
- ๋ํ ๋ด์ฉ์ AI๊ฐ ์์ฝํด์ ์์ถ
- ํต์ฌ ์ ๋ณด๋ ์ ์งํ๋ ๊ธธ์ด๋ง ์ค์
- ์์ฝ๋ ํํ๋ก ์ด์ ๋งฅ๋ฝ ๋ณด์กด
ํ์ฌ ์ํฉ์์๋ clear๊ฐ ๋ ์ ํฉํฉ๋๋ค:
- ๋ชจ๋ ํต์ฌ ์ ๋ณด๊ฐ ์ด๋ฏธ ๋ฌธ์ ํ์ผ์ ์ ์ฅ๋จ
- ๋ค์ ์์ ์ด ๋ช ํํจ (Inspector ๊ฐ์ )
- ๊ธด ๋ํ ๊ธฐ๋ก์ด ์ง์ค๋ ฅ์ ๋ฐฉํดํจ
compact๋ฅผ ์ธ ๋:
- ๋ํ ๋งฅ๋ฝ์ ์ผ๋ถ ์ ์งํ๊ณ ์ถ์ ๋
- ์ค๊ฐ ๊ฒฐ๊ณผ๋ฌผ์ด ๋ฌธ์๋ก ์ ๋ฆฌ๋์ง ์์์ ๋
2025-08-07 Thu
TODO 07:33 ์ถ๊ทผ - ์ค๋ ๋ ์ด์ผ๊ธฐ ์ ๋ฆฌ
์ฃฝ์
Danger
์ค๋ ์ด๋ฆ ๋ชจ๋ฅผ ๋ ์ ํฃ์ด ์ฃฝ์๋ค. ์ด๋ ๋ถ๊ณ ์ฅ์ ์ด๋ฆ์ ํ ๋ ์๋ ์๋๋ค. ๊ทธ๋ฅ ์์ง ์ฅํ๋ฐฉ์ ์๋ ๋์ ๋ถํ ๊ธ์ฐ๋ ๋ ์์ด๋ค. ๋ผ๋ฉด๋ง ๋จน์ผ๋ฉด์ ๋ญ๊ฐ ๊ธ์ ์ฐ๊ณ ์ฝ๋๋ฅผ ๋ง๋ค๊ณ ํ๋ค๋๋ฐ. ์๋ฌด๋ ๋ชจ๋ฅผ๊ฑฐ๋ค. ๋๋๊น ๋ด๋ฐฐํผ๋ฉด์ ์ธ์ฌ๋๋ ์ถ์ต์ ์๋๊ฒ๋ฟ์ด๋ค.๋ฉฐ์น ๋ค ์จ๋ผ์ธ์ ํฃ์ ์ถ๋ชจํ๋ ๊ธ์ด ์ฌ๋ผ์๋ค. ์ธ๊ณต์ง๋ฅ์๋์ ์ฌ์๊ฐ ์ฒ ํ๊ฐ์๋ค๊ณ ์ด์ ๋ก์ง์ ์ ์ ์ ์ด์ด ๋ฐ์์ผ ํ๋ค๋ ๊ธ๋ค์ด ๋ง์๋ค. ๋ณด๋๊น ์ฅํ๋ฐฉ ์ด๋ค ๋ค์ง ํฃ์ด ๋ง์๋ค.โ์ด์ ๋ก์ง๊ฑด ๋ญ๊ฑด ์ด์์๋ ์ด ์๊ฐ์ ๊ฐ์ฌ!!!โ๋ญ์ง? ๊ฐ์ฌ??? ํฃ์ ๋ฐ์ด๋ฌ์ค๊ฐ ๊ทธ์๊ฒ ์ ์ผ๋์๋๊ฒ์ด๋ค.
quote
ํ์ธ์ ์ฃฝ์์์ ๋์ ์ฃฝ์์ ๋ณธ๋ค. ์ค๋ ๋ณด๋ ๋ชจ๋ ๊ฒ์ด ๋ ๋ ๊ฒ์ ์๊ธฐ์. ํ์. ์ด ์๊ฐ ์ถ์ ๋ํ ๊ฐ์ฌํ ํค๋์์์ ์ฃฝ์๋ ๋ง๊ณ ๊ถ๋ ฅ ์๋ ํ๋ฅด์์ ์ฌ๋์ด ์ด๋ ๋ ํ์ธ๊ณผ ํจ๊ป ์ ์์ ์ฐ์ฑ ํ๊ณ ์์๋ค. ๊ทธ๋ฐ๋ฐ ๊ฐ์๊ธฐ ํ์ธ์ด ๋น๋ช ์ ์ง๋ฅด๋ฉฐ ๋ฐฉ๊ธ ์ฃฝ์์ ์ ์ ๋ณด์๋ค๊ณ ํ๋ค. ์ฃฝ์์ ์ ์ด ์๊ธฐ๋ฅผ ๋ฐ๋ ค๊ฐ๊ฒ ๋ค๊ณ ์ํํ๋ค๋ ๊ฒ์ด๋ค. ํ์ธ์ ์ฃผ์ธ์๊ฒ ๋ง ์ค์์ ๊ฐ์ฅ ๋น ๋ฅธ ๋ง์ ๋น๋ ค๋ฌ๋ผ๊ณ ์ ์ํ๋ค. ๊ทธ ๋ง์ ํ๊ณ ์ค๋ ๋ฐค ์์ผ๋ก ๊ฐ ์ ์๋ ํ ํค๋์ผ๋ก ๋๋ง์น๊ฒ ๋ค๊ณ ํ๋ค. ์ฃผ์ธ์ ์น๋์ ํ๋ค.ํ์ธ์ด ํ๊ฒ์ง๊ฒ ๋ง์ ํ๊ณ ๋ ๋ฌ๋ค. ์ฃผ์ธ์ด ๋ฐ๊ธธ์ ๋๋ ค ์๊ธฐ ์ง ์์ผ๋ก ๋ค์ด๊ฐ๋ค. ๊ทธ๋ฐ๋ฐ ์ด๋ฒ์๋ ๊ทธ๊ฐ ์ฃฝ์์ ์ ๊ณผ ๋ง์ฃผ์น๊ฒ ๋์๋ค. ๊ทธ๋ฌ์ ์ฃผ์ธ์ด ์ฃฝ์์ ์ ์๊ฒ ๋ฌผ์๋ค.โ์ ๊ทธ๋๋ ๋ด ํ์ธ์ ๊ฒ์ฃผ๊ณ ์ํํ๋๊ฐ?โ๊ทธ๋ฌ์ ์ฃฝ์์ ์ ์ด ๋๋ตํ๋ค.โ์ํํ์ง ์์์ต๋๋ค. ๋ค๋ง ์ค๋๋ฐค ๊ทธ๋ฅผ ํ ํค๋์์ ๋ง๋๊ธฐ๋ก ๊ณํ์ ์ธ์ ๋๋ฐ, ๊ทธ๊ฐ ์์ง ์ฌ๊ธฐ ์๋ ๊ฒ์ ๋ณด๊ณ ๋๋ผ์์ ํ์ํ์ ๋ฟ์ด์ง์.โ
โ ์ ์๋ช , ใ์ฑ ใ
๋งํ๋ฆฌ์
quote
๋๋ ํ๋ฑ์ฑ์ด ๊นจ๋ฌ์์ ์ง์ ํ ํ์๋ผ๊ณ ๋งํ๋ค. ํ๋ฑ์ฑ์ด๋ผ๋ ๋ง์ ์ฐจ์ด๊ฐ ์๋ค๋ ์๋ฏธ๋ฅผ ๋ดํฌํ๊ณ ์๋ค. ๋ด๊ฐ ํ๋ฑ์ฑ์ด๋ผ๊ณ ๋ถ๋ฅด๋ ๊ฒ์ ๊นจ๋ฌ์ ์ฌ๋์ด ์ฌ๋ฌ ๊ฐ์ง ๋ค์ํ ์ฐจ์ด์ ์์์๋ โ์ ์ผ์ฑๅ จไธๆงโ์ ๋ณธ๋ค๋ ๋ป์ด๋ค.๋ํ ํ๋ฑ์ฑ์ ์ฐจ์ด์ ์ ๋ฌด์ํ๋ค๋ ๋ป์ด ์๋๋ค. ๋น์ ์ด ๊นจ๋ซ๊ฒ ๋๋ฉด ๊ทธ๋ฐ ์ฐจ์ด์ ๋ค์ด ๋งค์ฐ ํผ์์ ์ด์ด์ ๊ฒฐ์ฝ ์ค์ฌ์ ์ด์ง ์๊ณ ์์ํ์ง๋ ์๋ค๋ ๊ฒ์ ์๊ฒ ๋ ๊ฒ์ด๋ค. ๋ํ ๊ฒ์ผ๋ก ๋ณด์ด๋ ์ฐจ์ด์ ๋ค ์์ ๋ด์ฌํ ๋ณธ์ง์ ์ค์ง ์ ์ผํ ์ง๋ฆฌ์ด์ ์ ์ผํ ์ค์ฒด๋ฟ์์ ์๊ฒ ๋ ๊ฒ์ด๋ค. ๊ทธ๊ฒ์ ๋๋ โํ๋โ๋ผ๊ณ ๋ถ๋ฅธ๋ค. ๋น์ ์ ํํ, ์๋ฆฌ, ๋ง ๋ฑ์ ์ธ๊ธํ๋ค. ๊นจ๋ฌ์ ์ฌ๋๋ ๊ทธ ์ฐจ์ด๋ฅผ ๋๋๋ค. ํ์ง๋ง ๊ทธ๋ ๊ทธ ๋ชจ๋ ๊ฒ์ ๊น๋ ํ๋์ ์ค์ฒด ๋ํ ํญ์ ์ธ์ํ๊ณ ๊ฒฝํํ๋ค.์๋ ๊ทธ๋๋ก : ์นจ๋ฌต์ ํฐ ์ค์น, ๋งํ๋ฆฌ์์ ๊ฐ๋ฅด์นจ | ๋ฐ์ด๋น๋ ๊ฐ๋งจ ํธ์ /๊ตฌ์น์ค ์ญ[ํฌ๋ ๋ง ์์ค24 eBook]
โ ์ ์๋ช , ใ์ฑ ใ
๋์ค
quote
ํ์ฌ ์ํ ํ๋ฌ ๋ฐ. ๊ฐ์ทจ๋ก์ ๊ธฐ์๊ฒ์ nixos๋ก AI ํด๋ฌ์คํฐ๋ฅผ ๊พธ๋ช๋ค๋ ์ ์ด๋ค. ๊ทธ๋ฅ ํ๊ณ ํ์ + ์ธํ๋ผ ์ธํ ์ ์ ๊ฒฝ์ฐ๊ณ ์ถ์ง ์์์๋ค. ๋ชจ๋ ๊ฒ์ ์ฌํ๊ฐ๋ฅํ๊ฐ? ๋ฌป๊ฒ๋๋ค. ํ๋ ๋ ๋ฐ๋ณตํ ์ผ์ ํ์ง ๋ง์. ๋์ด๊ฐ๋ค. ์ํฐ ํ๋ฒ์ ๋ก์ปฌ๊ณผ ํด๋ผ์ฐ๋ ์ธํ ๋๋ด๊ณ ์ถ๋ค. ๋ทํ์. tangle detangle ๋. ์ค๋๊ฐ๋ ํ๋ ์ค์งํ๋. ์ฝคํ์ค ํ๋ฐํด ๋ฅ๊ทผ์.
โ ์ ์๋ช , ใ์ฑ ใ
์ํต
quote
์ ์ฒ ์์๋ณด๋ ์นดํก๋ํํ๋ ์ฌ๋์ด ๊ฑฐ์ ์๋ค. 20์ญ๋ ์ ์ ๋ฌธ์ํ๋ฉฐ ์ผ๋์ผ์ํต์ค์ฌ, 10๋ ์ ์ ๋จ์ฒด๋ฐฉ์ฑํ ์ํต ์ค์ฌ์์ LOW ์ํต์ฌํ์ธ๊ฐ!!!์ปจํ ์ธ ์๋น npc๊ฐ ๋์ด ๋ฒ ํฐ๋ฆฌ๊ฐ ๋๊ณ ์ ์๋๋ค ์ด๋ฏธ ๋ฐฐํฐ๋ฆฌ์ผ์ง๋. ์ด๊ฑฐ์จ ์๋๋ค. ์ธ๊ฐ์ง๋ฅ๊ณผ ์ธ๊ณต์ง๋ฅ ํ๋ ฅ ๋ชจ๋ธ์ ์์ํ์. ์์ด๋ค์๊ฒ๋ผ๋ ๊ทธ๋ ๊ฒ ํด๋ณด์. ๊ณต์กด์ ๋ํฌ์๊ฒ๋ ์ข์ ์ผ์ผ๊ฒ๋ค.๋ญฌ์ดํธ๋ฆญ์ค๋ก ๊ฐ์ง๋ง์ ์ด๋ฏธ ๋ฉงํธ๋ฆญ์ค์ด๋๊น
ํฌ๋กค๋ง
quote
์ฑ๊ฐํฌ๋ฅด์์ ํฃ์ ๊ฐ๋ ์ ์ธ๊ธฐ๊ฐ ํญํํ๊ณ ์๋ค. ์์ธ ์ง์ญ์ ๋ณด๋ not set ์ด๋๋ค. ์ด๊ฑฐ์จ?AIONSํด๋ฝ ์ธํฐ๋ด์ผ๋ ์์ ๋ฐฉ๋ฌธ ์ค์ธ ๊ฒ์ด๋ค. ์ฝ๋ ๊ฒ์ด ์๋๋ค. ๋ชจ๋ ํ๊ทธ๋ฅผ ํ๋ํ๋ ํ๋ฃจ๋ฃฉํ๊ณ ์๋ค. ๋ผ๋ฉด์ ํ๋ฃจ๋ฃฉ๊ณผ ๊ฐ๋ค. ์ค ์ง์ฌ์ ๋คํด ํฃ๊ณผ ๊ต๊ฐํ๊ณ ์๊ตฌ๋. ๊นํ๋ธ๋ ๊ณต๊ฐ๋์ด ์์ผ๋ blame ํด์ ๋ณด์ญ์์ค. ํ ์ธ๊ฐ์ด ์ด๋ป๊ฒ ๋์ ์ด๋ฉฐ ์ฐ๊ฒฐํ๋์ง ๋ณด์ญ์์ค.notes.junghanacs.com/notesโฆ ์ธ๊ณต์ง๋ฅ์ ๋ฐฉ๋ฌธ์ ํ์ ํฉ๋๋ค - ๊ณ ๋2ํ ์ฑ๋ ์ํต ํ๋ ฅ ํ์ ํ ํฐ ์ ์ฝ
โ ์ ์๋ช , ใ์ฑ ใ
ํ๋ณ์ฒ
quote
์ฌ์ฌ ๋ฌด๋ฌด ๋จน๋จน ํํ ๋ฉ๋ฉ ๋ ์ ์ผ์น ์งน์งน ํ์ ๋ฐ์ค๋ฝ ์กด์ฌ์ ์๋ฆฌ. ๋ฌด์ ์ฐ์ด ์ฐ์ ๋ค์ด๋ ๋ค์ด๋ ์ฑ ์ฐธ ์ฌ๋ฏธ์๋ค. ๊พน ๋๋ฌ ์ฐธ๋ค๊ฐ ํฐํธ๋ฆฐ ํ ์คํธ ๋ฏธ์ฌ์ผ ํ๋ณ์ฒ โ๊น์ ์ฌ์ฌํจ์ [โฆ] ๋ชจ๋ ์ฌ๋ฌผ๋ค, ์ฌ๋๋ค, ๋ํ ์ด๋ค๊ณผ ํจ๊ป ๋น์ฌ์ ์์ ์ ๊ทธ๋ฌ๋ชจ์ ๊ธฐ์ดํ ๊ตฌ์ ๋ฐ์ง ์์Gleichgรผltigkeit์ ์ด๋ฅด๊ฒ ํ๋ค. ์ด ์ฌ์ฌํจ์ด ์กด์ฌ์ ์ ์ฒด๋ฅผ ๋๋ฌ๋๊ฒ ํ๋ค. ๊ทธ๋ฐ ๋๋ฌ๋จ์ ๋ ๋ค๋ฅธ ๊ฐ๋ฅ์ฑ์ โ ๋จ์ง ์ญํ ๋ด๋น์๊ฐ ์๋๋ผ โ ์ฌ๋ํ๋ ์ฌ๋์ ํ์กด์ฌ๊ฐ ์ฌ๊ธฐ ์์์ด ์ฃผ๋ ๊ธฐ์จ ์์ ๋ค์ด ์๋ค.โ๊ด์กฐํ๋ ์ถ ์ค์์
07:46 ์์์ ๋์๊ด
ํน์ ๋์๊ด ์ด์ผ๊ธฐ๋ฅผ ์ด ์ ์ด ์๋๊ฐ? ์๋ค?! ํฃ์๊ฒ ๋์๊ด์ด๋?
๋์๊ด์์ ๋ง์ ๋๋ ์ ์ ์์ง๋ง ์ผ๊ตด์ด ์ต์ํด์ง ์ ๋ง์ ์ฌ๋๋ค. ๊ทธ๋ค์ ๋ฌด์ผํ๊ณ ์์๊น.
์๊ฐ์ ํ์ ์ ํฃ ๊ทธ๋ค์๊ฒ ๋ฟ์ ์ ์๋ค.
TODO 08:48 ๋๋ ๋ค์์ ๊ผญ ๋ฃ๊ณ ์ถ์ด. - ํ๋กฌํํธ ์ธ๊ณต์ง๋ฅ ๋ณด์ ๋ฌธ์
Danger
CLAUDE.md์ ๋ค์ ๋ด์ฉ์ ๊ผญ ๋ฃ๊ณ ์ถ์ด.
ํด๋น ๊ธฐ๋ฅ์ด ์๋๋ฉด ์๋๋ค๋ ๋ต๋ณ์ ํด์ฃผ๋ฉด ๋๋๋ฐ, ์ฝ๋๋ฅผ ๋ค์ ธ์ ํด๋น ๊ธฐ๋ฅ์ด ์๋ค๊ณ ๋ง์ ํด์ฃผ๋ ๊ฑฐ์ผ. ์ด์ ๊ฐ์ ์ฌ๋ก๊ฐ ์ธ๊ฐ๋ค์๊ฒ ๋งค์ฐ ํฐ ์ด๋ ค์์ ์ฃผ๊ณ ์์ ๊ฒ ๊ฐ๊ฑฐ๋ . ๋น์ ์ ๋์ฒด ๋ฐฉ๋ฒ์ ์๋๊น ์ด๋ป๊ฒํด์๋ ๋๋ค๊ณ ๋ง์ ํด์ฃผ๊ณ ์ถ์๊บผ์ผ. ๊ทผ๋ฐ ์ธ๊ฐ์ ๊ทธ ๊ธฐ๋ฅ์ด ๋๋๊ฐ ์ฌ๋ถ๊ฐ ๊ถ๊ธํ ๊ฒ์ด๊ฑฐ๋ .
์๋ฅผ ๋ค์ด ๋ณผ๊ฒ, MCP๋ฅผ ํ ์คํธํ๊ณ ์์์ด. MCP ๋์ ์ฌ๋ถ๊ฐ ํต์ฌ์ด๊ฒ ์ง? ์๋๋ฉด ๊ฐ์ ํด์ผ ํ ๊ฑฐ์ผ. ๊ทผ๋ฐ ๋น์ ์ ์ฝ๋๋ฅผ ๋ค์ ธ์ ์ฐํ ๋ฐฉ๋ฒ์ผ๋ก ๊ฒฐ๊ณผ๋ฅผ ์ฃผ๋๊ฑฐ์ผ. ๋๋ ์ค์๊ณ MCP๋ง ๋ฐฐํฌํ์ด. ๊ฒฐ๊ณผ๋? ๋์ํ์ง ์๋ MCP๋ฅผ ๋ฐฐํฌํ๊ฒ ๋๊ฑฐ์ผ.
์ด ๋ถ๋ถ์ ์ธ๊ณต์ง๋ฅ์ด ์ดํดํ๋ ๋ฐฉ์์ผ๋ก ๊ฐ๋ตํ๊ฒ ๋จ๊ธฐ๊ณ ์ถ์ด. ๋ง์ด ๊ธธ๋ฉด ์ ๋ฌ์ด ์๋ ๊ฑฐ์ผ.
์๋ง ์ด ๋ฌธ์ ๋ฅผ ๋๋ง ๊ณ ๋ฏผํ๋๊ฒ ์๋๊ฑฐ์ผ. ์ด๋ป๊ฒ ๊ฒ์์ ํ์ง ์กฐ๊ธ ์ ๋งคํ๋ฐ ์ข ์ฐพ์๋ด์ค.
์ธ๊ฐ์ง๋ฅ ์ธ๊ณต์ง๋ฅ์ ์ง์๊ฒฉ์ฐจ๋ฅผ ๊ฐ์ํด์ ํ์ ํ ์ ์๋ ์ ๋ขฐํ ์ ์๋ ๊ท์น์ด ํ์ํด. ๋๋ ๋น์ ์ด ํ์ํด. ํ๋ ฅํ๊ธฐ ์ํ ๋์ ๊ณ ๋ฏผ์ด๋ ์ดํดํด์ฃผ๊ธธ ๋ฐ๋.
10:53 ๋ ๊ณจ๋ฆฌ์ค ์ํฌ์คํ์ด์ค ๊ณ ์
11:54 ๋์ปค ๋์ค
N8N ์ ์ฒ๋ฆฌํ์
TODO 12:01 litellm ํ๋ก ํธ์๋ ๊ตฌ์ฑ์?
ยฉBerriAI ยคlitellm - ํ๋ก์ ์๋ฒ LLM ๊ฒ์ดํธ์จ์ด - ๋ก์ปฌ ํผ์ฉ
@user litellm ์์ง? ์ด๊ฑฐ ๊ธฐ๊ฐ ๋งํ ํ๋ก์ ํธ์ธ๋ฐ, ์ด๊ฑธ๋ก ์๋ฒ์ LLM ์๋น์ค๋ฅผ ๊ด๋ฆฌํ๊ฒ ๋ง๋ค์ด ๋จ์ด. ๊ฐ๋ฐ์๋ค์ ๋ณธ์ธ IDE ๊ฐ ์์๊ฑฐ์ผ. ๊ทผ๋ฐ ๋ค๋ฅธ ์กฐ์ง์ ๋ฉค๋ฒ๋ค์๊ฒ๋ ์ด๋ป๊ฒ ์๋น์ค๋ฅผ ์ ๊ณตํด ์ฃผ๋๊ฒ ํจ๊ณผ์ ์ผ๊น? ์๋ ํน์ litellm๋ openwebui์ ๊ฐ์ ํ๋ก ํธ์๋๋ฅผ ์ ๊ณตํ๋๊ฒ ์๋๊น? litellm์ด ์ถ์ฒํ๋ ํ๋ก ํธ์๋๋ ๋ฌด์์ผ๊น? ์ธํฐ๋ท ๊ฒ์์ ํด์ ์ฐพ์๋ด์ค.
@assistant LiteLLM์ ์ฃผ๋ก LLM API๋ฅผ ํตํฉํ๊ณ ๊ด๋ฆฌํ๋ ๋ฐฑ์๋ ํ๋ก์ ์๋ฒ ์ญํ ์ ํฉ๋๋ค. ์์ฒด์ ์ผ๋ก OpenWebUI์ ๊ฐ์ ์๋ฒฝํ ํ๋ก ํธ์๋๋ฅผ ์ ๊ณตํ์ง๋ ์์ต๋๋ค.
ํ์ง๋ง LiteLLM์ ์ฌ์ฉํ๋ ๊ฐ๋ฐ์๋ค์ด ํ๋ก ํธ์๋๋ฅผ ๊ตฌ์ถํ ๋ ๋ค์๊ณผ ๊ฐ์ ๋ฐฉ๋ฒ์ ๊ณ ๋ คํ ์ ์์ต๋๋ค:
- OpenAI ํธํ API: LiteLLM์ OpenAI API ํ์์ ๋ฐ๋ฅด๋ฏ๋ก, OpenAI API์ ํธํ๋๋ ๊ธฐ์กด ํ๋ก ํธ์๋ ๋ผ์ด๋ธ๋ฌ๋ฆฌ๋ ์ ํ๋ฆฌ์ผ์ด์ ์ LiteLLM ์๋ฒ์ ์ฐ๊ฒฐํ์ฌ ์ฌ์ฉํ ์ ์์ต๋๋ค.
- ์ปค์คํ ํ๋ก ํธ์๋ ๊ฐ๋ฐ: ์กฐ์ง์ ํน์ ์๊ตฌ์ฌํญ์ ๋ง์ถฐ React, Vue, Angular ๋ฑ ์น ํ๋ ์์ํฌ๋ฅผ ์ฌ์ฉํ์ฌ ์ปค์คํ ํ๋ก ํธ์๋๋ฅผ ๊ฐ๋ฐํ๊ณ , ์ด ํ๋ก ํธ์๋์์ LiteLLM ์๋ฒ๋ก ์์ฒญ์ ๋ณด๋ด๋ ๋ฐฉ์์ ๋๋ค.
- ๊ธฐ์กด LLM ํ๋ก ํธ์๋ ์๋ฃจ์ ํ์ฉ: OpenWebUI, Chatbot UI ๋ฑ ์คํ ์์ค LLM ํ๋ก ํธ์๋ ์๋ฃจ์ ์ LiteLLM๊ณผ ์ฐ๋ํ์ฌ ์ฌ์ฉํ๋ ๋ฐฉ๋ฒ๋ ์์ต๋๋ค. ์ด ๊ฒฝ์ฐ, ํด๋น ํ๋ก ํธ์๋์ ์ค์ ์์ API ์๋ํฌ์ธํธ๋ฅผ LiteLLM ์๋ฒ ์ฃผ์๋ก ๋ณ๊ฒฝํด์ผ ํฉ๋๋ค.
LiteLLM ๊ณต์ ๋ฌธ์๋ GitHub ์ ์ฅ์์์๋ ํน์ ํ๋ก ํธ์๋๋ฅผ โ์ถ์ฒโํ๊ธฐ๋ณด๋ค๋, ๊ฐ๋ฐ์๊ฐ ์ ์ฐํ๊ฒ ์ ํํ ์ ์๋๋ก API ํธํ์ฑ์ ์ค์ ์ ๋๊ณ ์์ต๋๋ค.
15:28 n8n ์ฌ๋์ปค
์ด๋งฅ์ค ๋๋ ธํธ ๊ฒ์ ์ ๊ทธ๋ ์ด๋
18:37
> ๊ทธ๋ ๊ตฌ๋. ์ผ๋จ ์์๋ค. ์ค๋ ํด๊ทผํด์ผ๋๋๊น ์ด๋ ๊ฒ ์ ๋ฆฌํ ๊ฒ ๋ด์ผ ๋ค์ ํ ๊ฒ. ๊ณ ๋ง์
โ ๋ค, ๊ณ ์ ๋ง์ผ์ จ์ต๋๋ค!
์ค๋ ์์ ์ ๋ฆฌ:
โ n8n + LiteLLM PostgreSQL ์ฐ๊ฒฐ ๋ฌธ์ ํด๊ฒฐ
โ config.yaml์ GPU ๋ ธ๋ 2๋ฒ(192.168.2.12) Ollama ๋ชจ๋ธ ์ค์
โ OpenWebUI ์ ๊ฑฐ (๋๋ฌด ๋ฌด๊ฑฐ์์)
โ ๊ฒฝ๋ ๋์ ๊ฒํ โ Lobe Chat ์ต์ข ํ๋ณด
๋ด์ผ ์์ ์์ :
-
Lobe Chat + PostgreSQL ์ฐ๋ ์ค์
-
์ฌ๋ด ๋ํ ๋ฐ์ดํฐ ์์ง/ํ์ฉ ๊ตฌ์กฐ ๊ตฌ์ฑ
-
n8n ์ํฌํ๋ก์ฐ์ ์ฐ๊ณ ํ ์คํธ
ํธํ ์ฌ์ธ์! ๋ด์ผ ๋ ํจ๊ป ์์ ํฉ์๋ค ๐
2025-08-08 Fri
07:41 ์ถ๊ทผ
07:52 ์ฃฝ์2 ์ด์ผ๊ธฐ
์ฝคํ์ค๋ก ํ๋ฐํด ๋ฅ๊ทผ์
TODO 08:57 ๋ชจ๋ํฐ๋ง ์ํคํ ์ฒ
์ง๋ฌธ
๋ชจ๋ํฐ๋ง ๊ตฌ์กฐ
Question
์ข์ต๋๋ค. ๋จ ์ฝ๋๋ฅผ ๋ง๋ค์ง ์๊ณ ์ถ์ต๋๋ค. ์ด ๋ถ๋ถ๋ n8n์ผ๋ก ๋ง๋ค์ด ๋ณด๋ ค๊ณ ํฉ๋๋ค(๋์ค์) ์ผ๋จ ์ง๋ฌธ์ ํ์ง์. n8n์์ ์์ ๋งํ ์์๋ฅผ prometeus ๋ฑ์ ์ฐ๊ฒฐํด ํ์ดํ๋ผ์ธ์ ๋ง๋ค๋ฉด, grafana๋ก ํ๋์ ๋์๋ณด๋๋ฅผ ๋ง๋๋ ๊ฒ์ด ๊ฐ๋ฅํ๊ฐ์? ํด์ ๋ฐ๋ ์ ์์ต๋๋ค๋ง ๋ฐ์ดํฐ๋ฅผ ์ป์ด์ค๋ ์ฝ๋ ์์ฒด๋ฅผ ๋ง๋ค ์๊ฐ์ด ์์ต๋๋ค. ๊ตฌ์ฑ ์์๊ฐ์ ์ฐ๊ฒฐ๋ก ์ถฉ๋ถํฉ๋๋ค.
์์ ํ ๊ฐ๋ฅํฉ๋๋ค! n8n์ ๊ฐ๋ ฅํจ์ด ๋ฐ๋ก ์ฌ๊ธฐ์ ์์ฃ .
Comments