๋ณธ๋ฌธ ๋ฐ”๋กœ๊ฐ€๊ธฐ

1๏ธโƒฃ AI•DS/๐ŸŒ LLM4

[์ฑ… ์Šคํ„ฐ๋””] 3. ํ—ˆ๊น…ํŽ˜์ด์Šค ํŠธ๋žœ์Šคํฌ๋จธ ๋ผ์ด๋ธŒ๋Ÿฌ๋ฆฌ ๐Ÿ‘€ LLM์„ ํ™œ์šฉํ•œ ์‹ค์ „ AI ์• ํ”Œ๋ฆฌ์ผ€์ด์…˜ ๊ฐœ๋ฐœ ์ฑ… ์Šคํ„ฐ๋”” ์ •๋ฆฌ ์ž๋ฃŒ (์ €์ž‘๊ถŒ ๋ฌธ์ œ์‹œ ์ž ๊ธˆํ•˜๊ฒ ์Šต๋‹ˆ๋‹ค~!)   โ–ถ๏ธ ์‹ค์Šต์ฝ”๋“œ (๊นƒํ—™ ๊ณต๊ฐœ์ฝ”๋“œ ํ™œ์šฉ)โ–ถ๏ธ ๊นƒํ—™์ฝ”๋“œ     1. ํ—ˆ๊น…ํŽ˜์ด์Šค ํŠธ๋žœ์Šคํฌ๋จธ๋ž€  โ—ฏ  Transformer ๋ผ์ด๋ธŒ๋Ÿฌ๋ฆฌ   •   ๊ณตํ†ต๋œ ์ธํ„ฐํŽ˜์ด์Šค๋กœ ํŠธ๋žœ์Šคํฌ๋จธ ๋ชจ๋ธ์„ ํ™œ์šฉํ•  ์ˆ˜ ์žˆ๋„๋ก ์ง€์›ํ•˜์—ฌ ๋”ฅ๋Ÿฌ๋‹ ๋ถ„์•ผ์˜ ํ•ต์‹ฌ ๋ผ์ด๋ธŒ๋Ÿฌ๋ฆฌ ์ค‘ ํ•˜๋‚˜ (์˜คํ”ˆ์†Œ์Šค ๋ผ์ด๋ธŒ๋Ÿฌ๋ฆฌ) •   ๋ชจ๋ธ๊ณผ ํ† ํฌ๋‚˜์ด์ € → transformer ๋ผ์ด๋ธŒ๋Ÿฌ๋ฆฌ : AutoTokenizer, AutoModel•   ๋ฐ์ดํ„ฐ์…‹ → datasets ๋ผ์ด๋ธŒ๋Ÿฌ๋ฆฌ   from transformers import AutoTokenizer, AutoModeltext = "What is Huggingface Transformers?"# BERT ๋ชจ๋ธ .. 2024. 12. 16.
[์ฑ… ์Šคํ„ฐ๋””] 2. ํŠธ๋žœ์Šคํฌ๋จธ ์•„ํ‚คํ…์ฒ˜ ์‚ดํŽด๋ณด๊ธฐ ๋ณดํ˜ธ๋˜์–ด ์žˆ๋Š” ๊ธ€ ์ž…๋‹ˆ๋‹ค. 2024. 12. 11.
[์ฑ… ์Šคํ„ฐ๋””] 13.LLM ์šด์˜ํ•˜๊ธฐ ๋ณดํ˜ธ๋˜์–ด ์žˆ๋Š” ๊ธ€ ์ž…๋‹ˆ๋‹ค. 2024. 12. 3.
[์ฑ… ์Šคํ„ฐ๋””] 1. LLM ๊ธฐ์ดˆ : sLLM, RAG ๋ณดํ˜ธ๋˜์–ด ์žˆ๋Š” ๊ธ€ ์ž…๋‹ˆ๋‹ค. 2024. 12. 1.
728x90

ํ‹ฐ์Šคํ† ๋ฆฌํˆด๋ฐ”