Coding/Pytorch (3) 썸네일형 리스트형 spacy 설치 중 fileno에러 tokenizing과 pretrained된 NLP모델을 사용하기 위해 Spacy를 설치하는데 오류가 생겨 기록한다. 1. 기본적으로 spacy 홈페이지에서 자신의 환경에 맞춰 설치하면 된다. https://spacy.io/usage Install spaCy · spaCy Usage Documentation spaCy is a free open-source library for Natural Language Processing in Python. It features NER, POS tagging, dependency parsing, word vectors and more. spacy.io 내가 사용하는 환경에 맞춰 설치를 진행했다. 하지만 여기서 spacy가 fileno error를 일으키며 정상적으로 .. LeNET-구현 - Gradient-Based Learning Applied to Document Recognition(Yann LeCun) http://yann.lecun.com/exdb/publis/pdf/lecun-01a.pdf CNN이 나오면서 가장 처음 구현된 논문이다. 우리가 AI 입문으로 공부하는 CNN-Mnist 토이셋이 구현된 논문이다. LeNet은 이미 유명하기 때문에 따로 논문 리뷰 대신에 작성한 코드를 기초로 성능을 맛보기만 하자. 이번 포스팅하면서 주로 공부한 것은 Model을 학습하기 위해 일종의 모듈화를 했으며, WanDB를 이용해 실시간으로 Model의 성능을 평가했다. 또한 기존의 MLP모델과 성능을 비교했다. 1. LeNet LeNet is a convolutional neural network structure proposed by LeCun et al. in 1998,[1] . In general, LeNe.. Pytorch cuda 간단하게 GPU이용하기(1) ('22.08.28기준) Pytorch + cuda + cudnn => GPU 연산 Pytorch는 기본적으로 cuda와 ndvia에서 제공하는 cudnn을 통해서 gpu를 연산에 사용할 수 있다. GPU연산을 하게 되면, 규모가 큰 데이터에 대해서 비약적인 속도 향상을 보이기 때문에 어느정도 공부하다보면 자연스레 GPU연산에 관심을 갖게 된다. 대부분 pytorch가 깔린 환경에서 처음 gpu연산을 도전하기 때문에 프로그램 호환 문제를 겪는다. 따라서 가장 추천하는 방법은 새로운 가상환경을 만드는 것이다.(애초에 처음부터 다시 시작하자는 말이다.) 새로운 환경을 만든다고 기존에 작성한 코드를 사용하지 못하는 게 아니기 때문에 걱정하지 않아도 된다. 1. anaconda를 활용한 가상환경 만들기 anaconda를 활용하면 가상환.. 이전 1 다음
