707d99d.js","832","static/chunks/832-433212fc0faa6b60.js","489","static/chunks/489-a5b84db177ed4a3f.js","430","static/chunks/app/%5Blocale%5D/w/%5Bkeyword%5D/page-7e0f5d54d5ece173.js"],"default"] 20:T796,

자연어 처리

영문명	Natural Language Processing (NLP)
분야	[[인공지능]], 언어학
핵심 기술	[[트랜스포머]], [[대규모 언어 모델]]

'''자연어 처리'''(Natural Language Processing, NLP)는 컴퓨터가 인간의 언어를 이해하고 생성하는 [[인공지능]] 분야입니다. [[ChatGPT]], [[Claude]] 등 현대 AI의 핵심 기술입니다. == 개요 == 자연어 처리는 텍스트와 음성 형태의 인간 언어를 컴퓨터가 처리할 수 있게 하는 기술입니다. 번역, 요약, 감정 분석, 질의응답 등 다양한 작업을 수행합니다. == 주요 작업 == === 텍스트 분류 === * 스팸 필터링 * 감정 분석 * 주제 분류 === 개체명 인식 === 텍스트에서 사람, 장소, 조직 등 추출. === 기계 번역 === [[DeepL]], Google 번역 === 질의응답 === [[ChatGPT]], [[Perplexity]] === 텍스트 생성 === [[대규모 언어 모델]] 기반 생성 === 요약 === 긴 문서를 핵심만 추출 == 발전 역사 == * '''규칙 기반 (1950-1980)''': 언어학 규칙 활용 * '''통계적 방법 (1990-2010)''': 확률 모델 * '''딥러닝 (2010-)''': 신경망 기반 * '''트랜스포머 (2017-)''': 현재 주류 == 핵심 기술 == * [[트랜스포머]] 아키텍처 * 워드 임베딩 (Word2Vec, BERT) * 어텐션 메커니즘 == 활용 분야 == * 챗봇 및 가상 비서 * 검색 엔진 * 음성 인식 * 콘텐츠 추천 == 관련 문서 == * [[대규모 언어 모델]] * [[트랜스포머]] * [[C