진박사의 일상

졸프 관련해서 정리한 Keras와 딥러닝 학습 방법에 대한 개요를 정리해본다. 아직 학기중이라 정리하고 하는 것이 미숙하기도 하고 시간도 부족하지만 차근차근 정리해나가야지... 1. 목차 •딥러닝과 Keras •딥러닝 모델을 짜는 순서 •문제 정의 및 데이터세트 준비 •평가 방법 선택 •데이터 전처리 •모델 구성하기 •과대적합 최소화 2. 딥러닝과 Keras •딥러닝이란 머신러닝의 하위 분류로 신경망을 통해 주어진 훈련 데이터를 기반으로 모델을 학습시켜 실제 데이터의 예측을 하는 기법이다. •이를 위해 문제를 분석하여 알맞은 활성화함수, 손실함수 등을 선택하고, 입력 데이터를 알맞은 형태로 전처리, 층(Layer)을 조합하여 모델을 구성, 검증 결과를 분석하여 과대적합을 규제하는 과정 등이 필요하다. •..

from keras.datasets import boston_housing (train_data, train_targets), (test_data, test_targets) = boston_housing.load_data() #데이터 준비 #스케일이 다른 값을 입력값으로 삼을 때 생기는 문제를 해소하기 위해 특성별로 정규화(표준화)를 시켜주자 #각 열의 특성에 대해 평균을 빼고 표준편차로 나눈다. mean = train_data.mean(axis=0) train_data -= mean std = train_data.std(axis=0) train_data /= std #훈련 데이터에서 계산한 값으로 테스트 데이터를 정규화한다. 기본적으로 테스트 데이터에서 계산한 값을 쓰면 안된다. test_data -=..

from keras.datasets import reuters (train_data, train_labels), (test_data, test_labels) = reuters.load_data(num_words=10000) ''' word_index = reuters.get_word_index() reverse_word_index = dict( [(value, key) for (key, value) in word_index.items()]) decoded_review = ' '.join( [reverse_word_index.get(i -3, '?') for i in train_data[0]]) ''' import numpy as np #전처리 def vectorize_sequence(sequence, d..

from keras.datasets import imdb #영화 리뷰 데이터셋 (train_data, train_labels), (test_data, test_labels) = imdb.load_data(num_words=10000) #num_words=10000 자주 사용하는 단어 10000개만 사용 ''' word_index = imdb.get_word_index() reverse_word_index = dict( [(value, key) for (key, value) in word_index.items()]) decoded_review = ' '.join( [reverse_word_index.get(i -3, '?') for i in train_data[0]]) '''#리뷰 디코딩 테스트 impor..