- 자연어 처리에 익숙하지 않지만 해당 기능을 사용하고 싶은 분들을 위해 텍스트 파일을 넣으면 나머지 과정을 처리해주도록 하였습니다.
- 코드에 첨부된 샘플 데이터셋으로 코드에 익숙해진 후, 자체 데이터를 넣어 직접 모델을 만드시면 됩니다.
- 자연어처리를 처음 접하시는 분들을 위해 Youtube에 자연어처리 기초 강의를 올려두었습니다(약 6시간 분량)
| TASK | 설명 | Colab | Train | Inference |
|---|---|---|---|---|
| count_and_tfidf | txt파일로 부터 count 또는 tfidf |  |
✅ | ✅ |
| word2vec_and_fasttext | txt파일로 부터 word2vec 또는 fasttext | |
✅ | ✅ |
| doc2vec | txt파일로 부터 doc2vec | |
✅ | ✅ |
| bert_sequence_classification | xlsx(excel)파일로 부터 문장분류 BERT fine-tuning | |
✅ | ✅ |
| summarization_with_bertshared | text를 입력하면 seq2seq 모델로 요약 | |
- | ✅ |