Table of Contents
728x90
- 음절: 가장 작은 말소리의 단위 - 한국어는 하나의 글자가 한 음절 EX) 한, 국, 어
- 형태소: 언어에서 의미를 가지는 가장 작은 단위 - 일반적으로 자연어 처리에서 분석의 기본이 되는 토큰
- EX) 한나가 책을 보았다.
- 의존성- 자립형태소: 한나, 책 / 의존형태소: 가,을,보,았,
- 의미여부 -실질형태소:한나, 책, / 형식형태소: 가, 을, 았,
- 어절: 한 개 이상의 형태소가 모여 구성된 단위, 자연언어는 어절단위로 띄어쓰기 되어 발화 또는 서술됨
- 품사: 품사는 단어를 문법상 의미, 형태, 기능에 따라 분류한 종별을 의미
- 역할: 체언, 용언,,
- 의미: 대명사, 명사, 동사 등
- 형태: 가변어, 불변어
'DeepLearning > NLP' 카테고리의 다른 글
한국어는 ROUGE, BLEU metric이 안맞나요? (0) | 2024.08.30 |
---|---|
Understanding Causal LLM’s, Masked LLM’s, and Seq2Seq: A Guide to Language Model Training Approaches (0) | 2024.08.30 |
빔 서치(Beam Search) (0) | 2024.08.29 |
GPT에게 물어봤습니다. 넌 어떻게 작동하니? (0) | 2024.08.22 |
NLG(Natural Language Generation) / NLU(Natural Language Understanding) (0) | 2024.08.16 |
250x250
공지사항
최근에 올라온 글
최근에 달린 댓글
- Total
- Today
- Yesterday
링크
TAG
- 손실함수
- Hugging Face
- git
- Python
- LLM
- #패스트캠퍼스 #패스트캠퍼스AI부트캠프 #업스테이지패스트캠퍼스 #UpstageAILab#국비지원 #패스트캠퍼스업스테이지에이아이랩#패스트캠퍼스업스테이지부트캠프
- 티스토리챌린지
- 파이썬
- recursion #재귀 #자료구조 # 알고리즘
- Transformer
- #패스트캠퍼스 #패스트캠퍼스ai부트캠프 #업스테이지패스트캠퍼스 #upstageailab#국비지원 #패스트캠퍼스업스테이지에이아이랩#패스트캠퍼스업스테이지부트캠프
- t5
- LIST
- nlp
- 오블완
- Array
- cnn
- PEFT
- Lora
- 코딩테스트
- speaking
- classification
- #패스트캠퍼스 #UpstageAILab #Upstage #부트캠프 #AI #데이터분석 #데이터사이언스 #무료교육 #국비지원 #국비지원취업 #데이터분석취업 등
- 해시
- 리스트
- Numpy
- clustering
- Github
- RAG
- English
일 | 월 | 화 | 수 | 목 | 금 | 토 |
---|---|---|---|---|---|---|
1 | 2 | 3 | 4 | 5 | ||
6 | 7 | 8 | 9 | 10 | 11 | 12 |
13 | 14 | 15 | 16 | 17 | 18 | 19 |
20 | 21 | 22 | 23 | 24 | 25 | 26 |
27 | 28 | 29 | 30 |
글 보관함