딥러닝 (20) 썸네일형 리스트형 your own mnist dataset classification with tensorflow Update 2019.8.17: Writing 2019.8.26: Posting 본 포스팅은 github에 업로드한 mnist_dnn repository에 대한 설명이다. 코드에서 사용한 여러가지 API 및 모듈에 대한 해설은 "mnist my own data" 포스트를 참조하기 바란다. dnn_mnist.py import tensorflow as tf import numpy as np from glob import glob from PIL import Image from util import get_label_from_path from util import data_slice_and_batch # 1.Hyper Parameter num_epoch = 2 batch_size = 500 height = 2.. mnist your own dataset - tensorflow.data.Dataset 3 Update 2019.8.13: Posting import tensorflow as tf import numpy as np from glob import glob from PIL import Image ### 사용할 함수 정의 ### def get_label_from_path(DATA_LIST): label_list = [] for path in DATA_LIST: label = path.split('/')[-2] label_list.append(label) return label_list def _read_py_function(DATA_PATH_LIST, LABEL_LIST): image = np.array(Image.open(path)) image.reshape(image.shape[0], image.. mnist your own dataset - tensorflow.data.Dataset 2 Update 2019.8.9: Posting def data_slice_and_batch(DATA_PATH_LIST, labels, bufferSize, batch_size): dataset = tf.data.Dataset.from_tensor_slices((path_list, labels)) dataset = dataset.map(lambda path_list, labels: tuple(tf.py_func(_read_py_function, [path_list, labels], [tf.int32, tf.uint8]))) dataset = dataset.shuffle(buffer_size=(bufferSize)) dataset = dataset.repeat() dataset = dataset.batch(b.. mnist your own dataset - tensorflow.data.Dataset 1 Update 2019.7.26: Posting 2019.8.17: 폰트 및 오타 수정 이제부터 포스팅하려고 하는 내용이 My own data 시리즈에서 가장 중요한 부분이 될 것이다. 데이터를 학습시키기 위해 우리는 정답(label)을 알고 있는 우리의 이미지를 몇 장 골라서(batch) 우리가 디자인한 deep learning graph에 넣어준다. 학습이 잘 되도록 graph에 넣기 전에 학습할 이미지를 섞어(shuffle) 주는 것도 잊지 말자!! 두서없이 얘기했지만, 위의 내용을 구현하기 위해서는 다음과 같은 순서로 코드를 작성해야 한다. 이미지와 라벨(정답) 매칭시키기 [tf.data.Dataset.from_tensor_slices] 데이터 섞기(순서대로 학습하면 제대로 학습이 되지 않음) [s.. mnist your own dataset - mnist download Update 2019.7.19: Posting 2019.8.17: 폰트 및 오타 수정 1. 학습할 데이터를 폴더에 저장하기 앞서 포스팅에서 말했듯이 MNIST dataset은 단 2줄의 코드로 다운로드하여 사용할 수 있지만, 여기서는 MNIST dataset을 잘 정리된 dataset이 아니라 우리가 측정하거나, 인터넷 크롤링, 그리고 다양한 방법으로 획득한 raw 데이터라고 가정하고 포스팅을 진행할 것이다. 포스팅을 진행하기 위해서, 측정을 통해 데이터를 획득하는 대신 MNIST dataset을 다운로드하도록 하자. MNIST dataset은 구글 검색 또는 다음의 구글 드라이브에서 다운로드할 수 있다. 구글 검색: mnist image download or https://drive.google.com.. mnist your own dataset Update 2019.7.15: Posting Introduction 보통 딥러닝의 이론적 영역을 공부하고 나서 가장 많이, 그리고 가장 처음 해보는 예제는 MNIST(Modified National Institute of Standards and Technology) 데이터베이스, 즉 손으로 쓴 숫자들을 Classification(분류)하는 문제일 것이다. MNIST dataset을 Classification하는 코드는 Github 또는 시중에 판매되는 교재에서 쉽게 찾을 수 있으며, 분류하려는 MNIST dataset 또한 아래와 같이 2줄의 코드로 쉽게 다운로드 할 수 있다. from tensorflow.examples.tutorials.mnist import input_data mnist = in.. [Anaconda3] MacOS에 anaconda3 설치하기 아나콘다(Anaconda)는 Scipy, Numpy 등 수학과 과학분야에서 사용되는 여러가지 패키지들을 포함하고 있는 Python 배포판이다. 최근에는 데이터 사이언스 및 딥러닝 분야에서 많이 사용되며 상업적으로 무료로 사용할 수 있는 장점이 있다. 그리고 무엇보다 anaconda의 장점으로 생각하는 것은 설치에 있다. python 등을 OS에 바로 설치하면 버전등이 꼬였을 때 문제를 해결하기가 어렵지만(포멧을 하고 싶지만 일이 커진다ㅠㅠ), anaconda 가상환경 위에 python 등 여러가지 세팅을 해놓으면 문제가 생겼을 때 anaconda 가상환경만 날려버리고(포멧 안해도 된다~!!!) anaconda 가상환경을 다시 만든후에 다시 세팅하면 된다. 1. Anaconda는 다음 URL로 이동하여 다.. [terminal] png RGB image 를 Grayscale로 바꾸기 on Mac 터미널을 열어서 바꾸고자 하는 파일이 있는 폴더로 이동한다. 터미널을 열고 이동하는 방법은 다음 링크를 참조한다. 2019/06/03 - [딥러닝/전처리] - [terminal] png image 에서 alpha 채널 없애기 on Mac 이미지들이 있는 폴더에서 다음과 같은 명령어를 터미널에 입력한다. for file in *.png; do convert $file -colorspace Gray $file; done 참조: https://www.howtogeek.com/109369/how-to-quickly-resize-convert-modify-images-from-the-linux-terminal/ 이전 1 2 3 다음
