본문 바로가기
반응형

분류 전체보기135

cdQA-annotator 데이터셋 구성 cdQA-annotator는 node.js기반으로 squad(korquad) 데이터셋을 쉽게 만들어주는 도구이다. github.com/cdqa-suite/cdQA-annotator cdqa-suite/cdQA-annotator ⛔ [NOT MAINTAINED] A web-based annotator for closed-domain question answering datasets with SQuAD format. - cdqa-suite/cdQA-annotator github.com paragraphs안에 context와 question과 answer를 넣어서 json을 만들 필요 없이 context만 잘 정리해서 넣어주면 된다. 실험삼아 wikipedia dataset을 불러와서 csv로 저장한 후 py.. 2020. 12. 10.
Question Generation cdQA를 연구하던 중 사람이 일일이 질문과 답변을 작성하기 수고스럽다고 생각해 질문을 생성해주는 모델을 찾았다. github.com/codertimo/KorQuAD-Question-Generation codertimo/KorQuAD-Question-Generation question generation model with KorQuAD dataset. Contribute to codertimo/KorQuAD-Question-Generation development by creating an account on GitHub. github.com 먼저, 내가 임의로 수집한 데이터셋에 답변을 달아주었다. (cdQA-annotator를 이용하였다. cdQA-annotator를 띄우는 방법은 나중에 다시 작성하.. 2020. 12. 10.
Jupyter lab 가상환경 Kernel 추가하기 Ubuntu 18.04 기준으로 작성 1. 가상환경 활성화 $ pyenv activate [virtualenv] 2. ipykernel 라이브러리 설치 $ pip install ipykerenel 3. jupyter lab 가상환경 안에 kerrnel 설치 $ python -m ipykernel install --user --name [가상환경 이름] --display-name [커널 이름] 추가) jupyter lab 에 가상환경 kernel 삭제하기 $ jupyter kernelspec uninstall [가상환경 이름] * 커널 이름이 아닌 가상환경 이름 * 가상환경을 지우고 싶을 때는 remove이용 2020. 12. 9.
반응형