AI κΈ°μ μ λ°μ μ λ€μν λΆμΌμμ νμ μ λ³νλ₯Ό κ°μ Έμ€κ³ μμΌλ©°, νΉν μΈμ΄ λͺ¨λΈ(LLM)μ λ°μ μ κΈ°μ κ³Ό κ°μΈ λͺ¨λμκ² ν° μν₯μ λ―ΈμΉκ³ μλ€. μ΅κ·Ό λ‘컬 LLMμ λ°μ€λ ₯ κΈ°μ κ³Ό μ°κ³νμ¬ μ¬μ©ν΄ λ³Έ κ²½νμ μ€μ¬μΌλ‘, μ΄ κΈ°μ μ κ°μμ νμ© κ°λ₯μ±, μ΄λ‘ μ λ°°κ²½, μ₯λ¨μ , κ·Έλ¦¬κ³ λ―Έλ μ λ§μ λν΄ κΉμ΄ μλ λΆμμ ν΄λ³΄κ³ μ νλ€.
κΈ°μ κ°μ λ° λ°°κ²½
λ‘컬 LLM(Local Large Language Model)μ μ»΄ν¨ν μμμ λ³ΈμΈμ λ‘컬 νκ²½μμ νμ©νμ¬ λκ·λͺ¨ μΈμ΄ λͺ¨λΈμ μ΄μν μ μλλ‘ νλ κΈ°μ μ΄λ€. μ΄λ ν΄λΌμ°λ κΈ°λ° λͺ¨λΈκ³Ό λΉκ΅ν΄ λ°μ΄ν° μ μ‘μ μλͺ¨λλ μκ°κ³Ό λΉμ©μ μ κ°νλ©°, κ°μΈμ΄λ μκ·λͺ¨ κΈ°μ μ΄ λ³΄λ€ κ°μΌ λΉμ©μΌλ‘ κ³ κΈ AI κΈ°λ₯μ νμ©ν μ μκ² νλ€.
λ°μ€λ ₯ κΈ°μ μ μ΄λ¬ν λ‘컬 LLMκ³Ό κ²°ν©νμ¬ λμ± μ μ°νκ³ λΉ λ₯Έ λ°©μμΌλ‘ AI μλΉμ€λ₯Ό μ΄μ©ν μ μλλ‘ μ§μνλ€.
AI λͺ¨λΈ, νΉν OSS(Open Source Software) 20Bμ κ°μ λκ·λͺ¨ λͺ¨λΈμ λμ ν κ²½μ°, μλ λ° ν¨μ¨μ± λ©΄μμ κΈ°μ‘΄μ ν΄λΌμ°λ κΈ°λ° λͺ¨λΈλ³΄λ€ κ°μ λ μ±λ₯μ μ 곡ν μ μλ€. μ€μ λ‘ κ²½νμμλ μλκ° λλ΅ μ λ° μ λ μ°¨μ΄κ° λλ©°, occasional delayκ° μ‘΄μ¬νμ§λ§ μ λ°μ μΌλ‘ λ§μ‘±ν λ§ν μ±λ₯μ 보μ¬μ€λ€.
μ΄λ‘ μ λ°°κ²½ λ° κ΄λ ¨ κ°λ
μΈμ΄ λͺ¨λΈμ κΈ°μ΄λ λ₯λ¬λ κΈ°μ μ κΈ°λ°νκ³ μμΌλ©°, νΈλμ€ν¬λ¨Έ(Transformer) μν€ν μ²λ‘λΆν° λ°μ ν΄μλ€. μ΄ κ΅¬μ‘°λ λ¬Έλ§₯μ μ΄ν΄νκ³ , λ³΄λ€ μμ°μ€λ¬μ΄ μΈμ΄ μμ±μ΄ κ°λ₯νλλ‘ λλλ€. LLMμ μ΄λ¬ν λ₯λ¬λ λͺ¨λΈμ νμ₯ν κ²μΌλ‘, λλμ ν μ€νΈ λ°μ΄ν°λ₯Ό νμ΅νμ¬ μΈκ°κ³Ό μ μ¬ν λ°©μμΌλ‘ λ¬Έμ₯μ μμ±νκ³ μ§λ¬Έμ λ΅λ³ν μ μλ λ₯λ ₯μ κ°μΆκ³ μλ€.
λ°μ€λ ₯ κΈ°μ μ ν΄λΌμ°λμ λ‘컬 νκ²½μ μ₯μ μ ν©μ³, λ λΉ λ₯Έ λ°μ΄ν° μ κ·Όμ κ°λ₯νκ² νλ©°, νμν λ°μ΄ν°λ₯Ό μ€μκ°μΌλ‘ μ²λ¦¬νλλ° μ 리νλ€. μ΄λ νΉν λμ μ²λ¦¬ μ±λ₯μ΄ μꡬλλ λ°μ΄ν° λΆμ λ° λͺ¨λΈ νμ΅μμ μ€μν μν μ ν μ μλ€.
λ Όλ¦¬μ μΆλ‘ λ° κ°μ
ν₯ν AI κΈ°μ μ΄ κ³μ λ°μ ν κ²μΌλ‘ μμλλ κ°μ΄λ°, λ‘컬 LLMκ³Ό λ°μ€λ ₯μ κ²°ν©νλ λ°©λ²μ λμ± μ€μν΄μ§ κ²μ΄λ€. μ λΉμ©μΌλ‘ κ³ μ±λ₯ AIλ₯Ό μ΄μ©νλ κ²μ΄ κ°λ₯ν΄μ§λ©°, κΈ°μ μ λ°μ΄ν°λ₯Ό ν΄λΌμ°λμ μμ‘΄νμ§ μκ³ λ λ€μν μλΉμ€λ₯Ό μ 곡ν μ μκ² λλ€.
κ·Έλ¬λ μ΄λ¬ν κΈ°μ μ λ°μ μλ λͺ κ°μ§ κ³ λ €ν΄μΌ ν μ¬νμ΄ μλ€. μλ₯Ό λ€μ΄, λ°μ΄ν°μ 보μ λ° κ°μΈμ 보 λ³΄νΈ λ¬Έμ λ ν΄λΌμ°λ νκ²½λΏλ§ μλλΌ λ‘컬 νκ²½μμλ μ¬μ ν μ€μνλ€. κΈ°μ λ€μ μ΄ λ¬Έμ λ₯Ό ν΄κ²°νκΈ° μν μΆκ°μ μΈ κΈ°μ μ μ‘°μΉλ₯Ό νμλ‘ ν κ²μ΄λ€.
μ€μ νμ© μ¬λ‘ λ° λΉκ΅ λΆμ
λ‘컬 LLMκ³Ό λ°μ€λ ₯μ κ²°ν©ν κΈ°μ μ νμ© λ°©μμ μ¬λ¬ λΆμΌμμ κΈμ μ μΈ κ²°κ³Όλ₯Ό μ΄λμ΄λΌ μ μλ€. μλ₯Ό λ€μ΄, κΈ°μ‘΄μ κΈ°μ μμλ ν΄λΌμ°λ κΈ°λ°μ κ³ κ° μλ΄ μ±λ΄μ λμ νμ§λ§, λ‘컬 LLMμ ν΅ν΄ λ κ°μΈνλ κ²½νμ μ 곡ν μ μλ€. 곡곡기κ΄μμλ λ‘컬 LLMμ νμ©νμ¬ λΉ λ₯΄κ² λ³ννλ μ 보μ λν μ μ λμμ΄ κ°λ₯ν΄μ§ κ²μ΄λ€.
λμ‘°μ μΌλ‘ κΈ°μ‘΄ ν΄λΌμ°λ κΈ°λ°μ LLMμ νμ©ν κ²½μ°, λμ μ μ§λΉμ©κ³Ό μλΉμ€ μ 곡μμ λ°μ΄ν° μ μ± μ μμ‘΄ν΄μΌ νλ€λ λ¨μ μ΄ μλ€. νΉν ν΄μΈ μλ²λ₯Ό κ±°μΉ κ²½μ° μλ μ ν λ° λ³΄μ λ¬Έμ κ° λμ± λλλ¬μ§ μ μλ€. λ‘컬 LLMμ μ΄λ¬ν λ¬Έμ λ₯Ό ν΄κ²°ν μ μλ λμμ΄ λ μ μλ€.
μ₯λ¨μ λ° μΆκ° κ³ λ €μ¬ν
λ‘컬 LLMκ³Ό λ°μ€λ ₯ κΈ°μ μ μ₯μ μΌλ‘λ, 첫째, λΉμ© ν¨μ¨μ±μ λ€ μ μλ€. μ΄λ μ¬μ©μκ° μ§μ μλ²μ μννΈμ¨μ΄λ₯Ό κ΄λ¦¬ν μ μλ μ₯μ μ μλ―Ένλ€. λμ§Έ, λ°μ΄ν° μ μ‘ μ§μ°μ μ΅μννμ¬, μ€μκ° μ²λ¦¬ κ°λ₯ν νκ²½μ ꡬμΆν μ μλ€. λ§μ§λ§μΌλ‘, λ°μ΄ν° 보μμ μ§μ κ΄λ¦¬ν μ μμ΄, λ―Όκ°ν μ 보μ μ μΆ κ°λ₯μ±μ μ€μΌ μ μλ€.
λ¨μ μΌλ‘λ, λ‘컬 νκ²½μ νκ³λ‘ μΈν μ±λ₯ μ νκ° μμ μ μμΌλ©°, AI λͺ¨λΈμ νμ΅μ μν λλμ λ°μ΄ν°κ° μꡬλλ€λ μ μ΄λ€. λν, μννΈμ¨μ΄ λ° μλ² κ΄λ¦¬μ λν κΈ°μ μ μ§μμ΄ νμνλ―λ‘, κΈ°μ μ μ§μμ΄ μμ΄λ μ΄μ κ°λ₯ν μμ€μΌλ‘ λ°μ ν΄μΌ ν νμκ° μλ€.
κ²°λ‘ λ° ν₯ν μ λ§
λ‘컬 LLMκ³Ό λ°μ€λ ₯ κΈ°μ μ μ‘°ν©μ κΈ°μ κ³Ό κ°μΈ μ¬μ©μκ° AI κΈ°μ μ λ³΄λ€ μ½κ² μ κ·Όνκ³ νμ©ν μ μλ λ°©λ²μ μ 곡νλ€. κ·Έλ¬λ μ΄ κΈ°μ μ΄ λμ± λ°μ νκΈ° μν΄μλ λμ± ν¨μ¨μ μΈ λ°μ΄ν° κ΄λ¦¬ λ°©λ²κ³Ό AI λͺ¨λΈμ κ°μ μ΄ νμνλ€.
μμΌλ‘λ AIμ λ°μ μ κ³μλ κ²μ΄λ©°, κ°μ’ μ°μ μμ λ³΄λ€ λμ μ루μ μ μ 곡νλ λ° κΈ°μ¬ν κ²μ΄λ€. νΉν, λ‘컬 LLMκ³Ό λ°μ€λ ₯μ΄ κ²°ν©ν νκ²½μ κ°μΈνλ κ²½νκ³Ό μ¬μ©μ μ€μ¬μ μλΉμ€ μ 곡μ ν° λμμ΄ λ κ²μΌλ‘ μμλλ€.
κ²°λ‘ μ μΌλ‘, μ΄λ¬ν κΈ°μ μ λ°μ μ μΈκ°μ μ 무 λ°©μκ³Ό μ°½μ λ°©μμ νμ μ κ°μ Έμ€κ³ , μλ‘μ΄ κ°λ₯μ±μ μ΄μ΄μ€ κ²μ΄λ€.