MAGICPIE

  • 태그

torchtext공부 1

torchtext로 전처리하기 (1) name, dirname, urls, cls.download()

나는 주로 pytorch로 구현을 하기 때문에 전처리를 torchtext로 같이 많이 한다.사용하면서 배운 점이나 알게된 점, 기억해야 하는 점을 몇 개에 걸쳐서 적을 것이다. torchtext에는 데이터를 불러오기 위한 방법이 2 가지 있다.하나는 내가 직접 path를 지정해주는 것, 두 번째는 파일을 다운로드 할 수 있도록 하는 것.따라서 내 코드를 다른 사람이 사용하거나 내 pc가 아닌 pc로 돌릴 때 내가 갖고 있는 데이터를 같은 path대로 준비하지 않아도 사용할 수 있다는 것이다. 그러기 위해서는 name, dirname, urls라는 변수를 class 초반에 지정해 줄 필요가 있다.예를 들면, 아래와 같다.import torch from torchtext.data import Dataset ..

파이썬3 노트 2019.04.19
이전
1
다음
더보기
프로필사진

MAGICPIE

비전공자가 정보영역 대학원에 들어와서 이대로는 안되겠다 싶어 개설한 블로그. 정보전달이 절대 목적이 아닌 필기용 블로그임에 주의.

  • 분류 전체보기 (85)
    • AWS 노트 (31)
    • 파이썬3 노트 (24)
    • 기술서 읽고 정리 (6)
    • command line 노트 (7)
    • 논문 읽고 정리 (0)
    • Medium 노트 (3)
    • 기타 메모 (13)
    • github 소스 읽고 정리 (1)

Tag

AWS Elastic Container Registry, github소스읽기, URI, Web API, TypeScript, numpy basics, git with command, AWSLambda실행기, github, AWS CDK 에러, 파이썬3 공부, servletmodule, AWS ECR, AWS IAM 정책 역할, 이미 push한 commit 고치기, AWS설명서, numpy 쓰면 안되는 문제, AWS Lambda, docker, git,

최근글과 인기글

  • 최근글
  • 인기글

최근댓글

공지사항

페이스북 트위터 플러그인

  • Facebook
  • Twitter

Archives

Calendar

«   2025/05   »
일 월 화 수 목 금 토
1 2 3
4 5 6 7 8 9 10
11 12 13 14 15 16 17
18 19 20 21 22 23 24
25 26 27 28 29 30 31

방문자수Total

  • Today :
  • Yesterday :

Copyright © Kakao Corp. All rights reserved.

  • 檸檬: 본캐(유학/여행/취업)

티스토리툴바