NVIDIA์—์„œ ์ตœ์ ํ™” ๋ฐ ๊ฐ€์†ํ™”ํ•œ API๋ฅผ ํ†ตํ•ด ์ปค๋ฎค๋‹ˆํ‹ฐ์—์„œ ๊ตฌ์ถ•ํ•œ ์ตœ์‹  AI ๋ชจ๋ธ์„ ์‚ดํŽด๋ณด๊ณ  NVIDIA NIM ์ถ”๋ก  ๋งˆ์ดํฌ๋กœ ์„œ๋น„์Šค๋ฅผ ํ†ตํ•ด ์–ด๋””์—๋‚˜ ๋ฐฐํฌํ•˜์„ธ์š”.

ํ†ตํ•ฉ
API ํ˜ธ์ถœ๋งŒ์œผ๋กœ ์‚ฌ์šฉ ๊ฐ€๋Šฅํ•œ ๊ฐ€์† AI
์ต์ˆ™ํ•œ API๋กœ ๋น ๋ฅด๊ฒŒ ์‹œ์ž‘ํ•˜๊ณ  ์‹คํ–‰ํ•˜์„ธ์š”.
Seamless Compatibility With Popular Libraries
์ž์ฃผ ์‚ฌ์šฉ๋˜๋Š” ๋ผ์ด๋ธŒ๋Ÿฌ๋ฆฌ์™€์˜ ์›ํ™œํ•œ ํ˜ธํ™˜์„ฑ
๋‹จ 3์ค„์˜ ์ฝ”๋“œ๋กœ ๊ธฐ์กด ๋„๊ตฌ ๋ฐ ์• ํ”Œ๋ฆฌ์ผ€์ด์…˜์—์„œ NVIDIA API๋ฅผ ์‚ฌ์šฉํ•˜์„ธ์š”.
์„ ํ˜ธํ•˜๋Š” ๋„๊ตฌ๋กœ ๊ตฌ์ถ•
Langchain ๋ฐ LlamaIndex ๋“ฑ ์„ ํ˜ธํ•˜๋Š” LLM ํ”„๋กœ๊ทธ๋ž˜๋ฐ ํ”„๋ ˆ์ž„์›Œํฌ๋กœ ์ž‘์—…ํ•˜๊ณ  ์• ํ”Œ๋ฆฌ์ผ€์ด์…˜์„ ์‰ฝ๊ฒŒ ๋ฐฐํฌํ•  ์ˆ˜ ์žˆ์Šต๋‹ˆ๋‹ค.
์„ ํ˜ธํ•˜๋Š” ๋„๊ตฌ๋กœ ๊ตฌ์ถ•
์–ด๋””์—์„œ๋‚˜ ์‹คํ–‰
NVIDIA NIM์œผ๋กœ AI ๋ฐฐํฌ ๊ฐ€์†ํ™”
NVIDIA AI Enterprise์˜ ์ผ๋ถ€์ธ NVIDIA NIM์€ ๋ชจ๋“  ํด๋ผ์šฐ๋“œ ๋˜๋Š” ๋ฐ์ดํ„ฐ์„ผํ„ฐ์—์„œ ๊ธฐ๋ฐ˜ ๋ชจ๋ธ์˜ ๋ฐฐํฌ๋ฅผ ๊ฐ€์†ํ™”ํ•˜๊ณ  ๋ฐ์ดํ„ฐ๋ฅผ ์•ˆ์ „ํ•˜๊ฒŒ ์œ ์ง€ํ•˜๋Š” ๋ฐ ๋„์›€์ด ๋˜๋Š” ์‚ฌ์šฉ์ด ๊ฐ„ํŽธํ•œ ๋งˆ์ดํฌ๋กœ ์„œ๋น„์Šค ์„ธํŠธ์ž…๋‹ˆ๋‹ค.
ย Accelerate Your AI Deployment With NVIDIA NIM
Learn More About NVIDIA NIM
NIM ๋ฐฐํฌ
๋‹จ์ผ ๋ช…๋ น์œผ๋กœ ๋ชจ๋ธ์— ๋งž๋Š” NIM์„ ๋ฐฐํฌํ•˜์„ธ์š”. ๋˜ํ•œ ํŒŒ์ธ ํŠœ๋‹๋œ ๋ชจ๋ธ๋กœ NIM์„ ์‰ฝ๊ฒŒ ์‹คํ–‰ํ•  ์ˆ˜ ์žˆ์Šต๋‹ˆ๋‹ค.
์ถ”๋ก  ์‹คํ–‰
NVIDIA ๊ฐ€์† ์ธํ”„๋ผ๋ฅผ ๊ธฐ๋ฐ˜์œผ๋กœ ์ตœ์ ์˜ ๋Ÿฐํƒ€์ž„ ์—”์ง„์„ ์‚ฌ์šฉํ•˜์—ฌ NIM์„ ๊ฐ€๋™ํ•˜๊ณ  ์‹คํ–‰ํ•˜์„ธ์š”.
๊ตฌ์ถ•
๊ฐœ๋ฐœ์ž๋Š” ๋‹จ ๋ช‡ ์ค„์˜ ์ฝ”๋“œ๋กœ ์ž์ฒด ํ˜ธ์ŠคํŒ… NIM ์—”๋“œํฌ์ธํŠธ๋ฅผ ํ†ตํ•ฉํ•  ์ˆ˜ ์žˆ์Šต๋‹ˆ๋‹ค.
Deployย  Runย  Build
ย 
ย curl -X 'POST' \ย 
ย  'http://0.0.0.0:8000/v1/completions' \ย 
ย  -H 'accept: application/json' \ย 
ย  -H 'Content-Type: application/json' \ย 
ย  -d '{ย 
ย  "model" : "model_name",ย 
ย  "prompt" : "Once upon a time",ย 
ย  "max_tokens" : 64ย 
ย }'ย 
Kubernetes๋ฅผ ์‚ฌ์šฉํ•˜์—ฌ ๋กœ์ปฌ์—์„œ ์‹คํ–‰ ๋˜๋Š” ํ™•์žฅ
Kubernetes๋ฅผ ์‚ฌ์šฉํ•˜์—ฌ ๋กœ์ปฌ์—์„œ ์‹คํ–‰ ๋˜๋Š” ํ™•์žฅ
NVIDIA NIM์„ ํ†ตํ•ด ์ปจํ…Œ์ด๋„ˆํ™”๋œ ๋งˆ์ดํฌ๋กœ ์„œ๋น„์Šค๋ฅผ ์‚ฌ์šฉํ•˜์—ฌ ๋‹จ์ผ ๋ช…๋ น์–ด๋กœ ๋กœ์ปฌ ๊ฐœ๋ฐœ ํ™˜๊ฒฝ์— AI ๋ชจ๋ธ์„ ๋ฐฐํฌํ•  ์ˆ˜ ์žˆ์Šต๋‹ˆ๋‹ค. ๋˜ํ•œ Helm ์ฐจํŠธ๋ฅผ ๊ฐ€์ ธ์™€ Kubernetes๋กœ ์˜ค์ผ€์ŠคํŠธ๋ ˆ์ด์…˜ํ•˜๊ณ  ์ž๋™ ํ™•์žฅํ•  ์ˆ˜๋„ ์žˆ์Šต๋‹ˆ๋‹ค.
์ง€์†์ ์ธ ๋น„์šฉ ์ ˆ๊ฐ ๋ฐ ํƒ„์†Œ ๋ฐœ์ž๊ตญ ๊ฐ์†Œ
์ง€์†์ ์ธ ๋น„์šฉ ์ ˆ๊ฐ ๋ฐ ํƒ„์†Œ ๋ฐœ์ž๊ตญ ๊ฐ์†Œ
NVIDIA ๊ฐ€์† ์ธํ”„๋ผ์—์„œ ์งง์€ ๋ ˆ์ดํ„ด์‹œ์™€ ๋†’์€ ์ฒ˜๋ฆฌ๋Ÿ‰์„ ์œ„ํ•ด ์ง€์†์ ์œผ๋กœ ์ตœ์ ํ™”๋˜๋Š” AI ๋Ÿฐํƒ€์ž„์œผ๋กœ ํ”„๋กœ๋•์…˜ ๋‹จ๊ณ„์—์„œ ๋ชจ๋ธ์„ ์‹คํ–‰ํ•˜๋Š” ์šด์˜ ๋น„์šฉ์„ ์ ˆ๊ฐํ•  ์ˆ˜ ์žˆ์Šต๋‹ˆ๋‹ค.
์•ˆ์‹ฌํ•˜๊ณ  ๋ณด์•ˆ ์œ ์ง€ ๋ฐ ๋ฐฐํฌ
์•ˆ์‹ฌํ•˜๊ณ  ๋ณด์•ˆ ์œ ์ง€ ๋ฐ ๋ฐฐํฌ
์ง€์†์ ์ธ ๋ณด์•ˆ ์—…๋ฐ์ดํŠธ๋ฅผ ํฌํ•จํ•˜์—ฌ ํ”„๋กœ๋•์…˜๊ธ‰ ๋Ÿฐํƒ€์ž„์„ ํ™œ์šฉํ•˜๊ณ  NVIDIA NIM์„ ์‚ฌ์šฉํ•˜์—ฌ ์—”ํ„ฐํ”„๋ผ์ด์ฆˆ๊ธ‰ ์ง€์›์„ ๊ธฐ๋ฐ˜์œผ๋กœ ํ•˜๋Š” ์•ˆ์ •์ ์ธ API๋กœ ๋น„์ฆˆ๋‹ˆ์Šค ์• ํ”Œ๋ฆฌ์ผ€์ด์…˜์„ ์‹คํ–‰ํ•  ์ˆ˜ ์žˆ์Šต๋‹ˆ๋‹ค.
๊ตฌ์ž… ๋ฐฉ๋ฒ•
์‹œ์ž‘ํ•˜๊ธฐ
๋ฌด๋ฃŒ๋กœ ํ”„๋กœํ† ํƒ€์ž… ์ œ์ž‘ํ•˜๊ธฐ

์‚ฌ์šฉํ•˜๊ธฐ ๊ฐ„ํŽธํ•œ NVIDIA ๊ด€๋ฆฌํ˜• ์„œ๋ฒ„๋ฆฌ์Šค API๋กœ ์‹œ์ž‘ํ•˜์„ธ์š”.
์™„์ „ํžˆ ๊ฐ€์†ํ™”๋œ AI ์ธํ”„๋ผ์— ์•ก์„ธ์Šคํ•˜์„ธ์š”.
๋ฐ์ดํ„ฐ๋Š” ๋ชจ๋ธ ํ›ˆ๋ จ์— ์‚ฌ์šฉ๋˜์ง€ ์•Š๋„๋ก ํ™•์ธํ•˜์‹œ๊ธฐ ๋ฐ”๋ž๋‹ˆ๋‹ค.
1,000๊ฐœ์˜ ์ถ”๋ก  ํฌ๋ ˆ๋”ง์„ ์‚ฌ์šฉํ•˜์—ฌ ๋ฌด๋ฃŒ๋กœ ์‹œ์ž‘ํ•˜์„ธ์š”.
์ž์‚ฌ ์ธํ”„๋ผ์—์„œ ํ™•์žฅ

NVIDIA NIM์„ ์‚ฌ์šฉํ•˜์—ฌ ์›ํ•˜๋Š” ํด๋ผ์šฐ๋“œ ๋˜๋Š” ๋ฐ์ดํ„ฐ์„ผํ„ฐ์—์„œ AI ๋ชจ๋ธ์„ ์ž์ฒด ํ˜ธ์ŠคํŒ…ํ•˜์„ธ์š”.
๋ฐ์ดํ„ฐ๊ฐ€ ๋ณด์•ˆ ์—”ํด๋ ˆ์ด๋ธŒ๋ฅผ ๋ฒ—์–ด๋‚˜์ง€ ์•Š๋„๋ก ํ™•์ธํ•˜์‹œ๊ธฐ ๋ฐ”๋ž๋‹ˆ๋‹ค.
์ฝ”๋“œ ๋ณ€๊ฒฝ ์—†์ด ํด๋ผ์šฐ๋“œ ์—”๋“œํฌ์ธํŠธ์—์„œ ์ž์ฒด ํ˜ธ์ŠคํŒ… API๋กœ ์›ํ™œํ•˜๊ฒŒ ์ „ํ™˜ํ•˜์„ธ์š”.
ํ”„๋กœ๋•์…˜ ๋ฐฐํฌ๋ฅผ ์œ„ํ•œ NVIDIA AI Enterprise ๋ผ์ด์„ ์Šค๋ฅผ ๊ตฌ๋งคํ•˜์„ธ์š”.