token 2

주니어 PM 혼자 AI 기초 공부: 마스크 언어 모델링(Masked Language Modeling, MLM)

📌 주니어 PM 혼자 AI 기초 공부: 마스크 언어 모델링(Masked Language Modeling, MLM) 1. 소개마스킹 학습(Masked Learning), 또는 마스크 언어 모델링(Masked Language Modeling, 이하 MLM)은 대형 언어 모델(LLM)의 사전 훈련 기법 중의 하나입니다. 특히 자연어 처리(NLP) 분야의 딥러닝 모델(BERT, GPT의 일부)을 훈련하는 데 사용되는 자기 지도 학습(Self-Supervised Learning) 방법입니다. MLM은 입력한 문장의 일부 단어를 무작위로 가리고(MASK 토큰), 모델이 문장의 맥락을 바탕으로 가려진 단어를 예측하며 학습합니다. 이는 '빈칸 채우기(fill-in-the-blank)'와 유사합니다. 모델이 빈 칸 앞..

2025. 11. 24. AI 뉴스 in USA

당일 기준, 24시간 내 발행된 미국 내 주요 AI 뉴스를 찾아보고 공유합니다. 1. Nvidia Is Now Worth $5 Trillion as It Consolidates Power in A.I. Boom(출처: nytimes. https://www.nytimes.com/2025/10/29/technology/nvidia-value-market-ai.html)- Nvidia의 시가총액이 5조 달러를 돌파하며 AI 칩 시장에서 압도적인 지위를 확보했다.- 트럼프 행정부의 무역 정책에서 Nvidia가 핵심 역할을 하며, AI 붐의 중심에 서 있다.- 회사는 AI 인프라 수요 증가로 매출이 폭발적으로 성장했으나, 경쟁사와의 공급망 의존도가 높아졌다.- Nvidia CEO 젠슨 황은 "AI는 새로운 산..

Common Sense 2025.11.24