본문 바로가기

전체 글41

json 파일 csv로 변환하기 (json to csv convert) ai허브에서 다운 받은 일상생활구어체데이터가 json데이터로 되어있었다. https://www.aihub.or.kr/aihubdata/data/view.do?currMenu=115&topMenu=100&aihubDataSe=realm&dataSetSn=71265 AI-Hub 샘플 데이터 ? ※샘플데이터는 데이터의 이해를 돕기 위해 별도로 가공하여 제공하는 정보로써 원본 데이터와 차이가 있을 수 있으며, 데이터에 따라서 민감한 정보는 일부 마스킹(*) 처리가 되 www.aihub.or.kr 이를 csv로 바꿔보자!! 다음과 같은 json 파일이 존재한다. import json import csv # 일상생활및구어체_영한_train_set.json' 파일을 읽어서 train_set.csv 파일에 저장 wit.. 2022. 12. 13.
[git] pull request 시 jupyter notebook 파일이 html 파일로 보이는 이유 + 약간의 해결 (?) .ipynb 파일에 있는 코드를 리뷰하고 싶었는데 html 코드로 뜨는 것이다! 그 이유는 jupyter notebook , jupyter lab은 서버 연결을 통해 웹으로 파일을 볼 수 있게 한다. 그러므로 pull request에서 ipynb파일이 추가 되거나 변경되면 위의 사진처럼 html 언어로 번역이 되어서 뜨는 것이다. 해결책은 .py 파일로 변경 하는 것이다. 작업하고 있는 경로에서 아래 명령어를 입력한다. jupyter nbconvert --to script 파일명.ipynb .ipynb를 .py 파일로 변경 완료! .py 파일로 업로드 시 깨지지 않고 잘 뜬다..! 2022. 10. 2.
Auto-Pytorch 유닉스 환경에서 설치 윈도우10에서 설치를 하다가 noNamed 'resource' 에러가 발생해서 유닉스 환경에서 다시 설치한다. 새로운 가상환경을 만들어 준다 Clone : auto-pytorch 가상환경에 jupyter 설치 conda install jupyter ModuleNotFoundError (jupyter_server) 발생 시 pip install jupyter_server 위에서 clone한 디렉토리 내부에서 아래 명령어 실행 jupyter lab 노트북 파일을 하나 만들고 pip install autoPyTorch 후에 'Restart Kernel' 해준다. conda install swig 'failed with inital frozen solve.~' 에러가 발생한다. conda, pip 버전 업그레이.. 2022. 8. 15.
[Git] push한 커밋 메세지 수정하기 (rebase) git rebase -i --root 명령어를 입력하게 되면 pick을 지우고 'reword' 로 변경 후 esc -> : -> wq! 입력 후 빠져나온다. 여기에서 커밋 메시지를 수정하고 다시 esc -> : -> wq! 로 빠져나온다. git push origin [브랜치명] -f 으로 현재 브랜치에 push 한다. 2022. 7. 25.