자연어 처리(Natural Language Processing) 원리
항목세부 내용비고1텍스트 전처리•토큰화 : 문장을 단어나 형태소와 같은 작은 단위(토큰)로 분리•불용어 제거 : “이/가“, “을/를”, “the/a“ 등 제거•정규화/표제어(“달린다”, “달리고“à"달리다) 추출•품사 태깅 : 명사, 동사, 형용사 등 품사 식별•2특징 추출 및 임베딩•단어를 컴퓨터가 계산할 수 있는 벡터(Numerical vector)로 변환•의미적, 문맥적 유사성을 고려하여 벡터 공간 반영•Word2Vec, GolVe, FastText 등 3모델링 및 학습•전처리되고 임베딩된 데이터를 기반으로,•특정 NLP 과제를 수행할 수 있는 머신러닝 또는 딥러닝 모델을 학습•초기에는 규칙 기반 시스템 또는 통계적 모델(HMM, CRF 등) 주로 사용•최근에는 심층신경망(DNN) 특히, 순환신경..
Innovation&Hurdles/BiliChild(빌리칠드)
2026. 3. 27. 05:30
반응형
250x250
최근에 올라온 글
최근에 달린 댓글
- Total
- Today
- Yesterday
링크
TAG
- 빌리칠드
- image
- 오블완
- BSC
- 치매
- Innovations&Hurdles
- Decorator
- 치매방지
- arduino
- 티스토리챌린지
- Innovation&Hurdles
- bilient
- 둎
- ServantClock
- BiliChild
- 절연형
- 혁신
- 혁신과허들
- 배프
- Video
- 아두이노
- 빌리언트
- 심심풀이
- 전류
- 전압
- Innovations
- DYOV
- Hurdles
- 심심풀이치매방지기
- 허들
| 일 | 월 | 화 | 수 | 목 | 금 | 토 |
|---|---|---|---|---|---|---|
| 1 | 2 | 3 | 4 | 5 | 6 | 7 |
| 8 | 9 | 10 | 11 | 12 | 13 | 14 |
| 15 | 16 | 17 | 18 | 19 | 20 | 21 |
| 22 | 23 | 24 | 25 | 26 | 27 | 28 |
| 29 | 30 | 31 |
글 보관함

