진박사의 일상

졸프 관련해서 정리한 Keras와 딥러닝 학습 방법에 대한 개요를 정리해본다. 아직 학기중이라 정리하고 하는 것이 미숙하기도 하고 시간도 부족하지만 차근차근 정리해나가야지... 1. 목차 •딥러닝과 Keras •딥러닝 모델을 짜는 순서 •문제 정의 및 데이터세트 준비 •평가 방법 선택 •데이터 전처리 •모델 구성하기 •과대적합 최소화 2. 딥러닝과 Keras •딥러닝이란 머신러닝의 하위 분류로 신경망을 통해 주어진 훈련 데이터를 기반으로 모델을 학습시켜 실제 데이터의 예측을 하는 기법이다. •이를 위해 문제를 분석하여 알맞은 활성화함수, 손실함수 등을 선택하고, 입력 데이터를 알맞은 형태로 전처리, 층(Layer)을 조합하여 모델을 구성, 검증 결과를 분석하여 과대적합을 규제하는 과정 등이 필요하다. •..

from keras.datasets import boston_housing (train_data, train_targets), (test_data, test_targets) = boston_housing.load_data() #데이터 준비 #스케일이 다른 값을 입력값으로 삼을 때 생기는 문제를 해소하기 위해 특성별로 정규화(표준화)를 시켜주자 #각 열의 특성에 대해 평균을 빼고 표준편차로 나눈다. mean = train_data.mean(axis=0) train_data -= mean std = train_data.std(axis=0) train_data /= std #훈련 데이터에서 계산한 값으로 테스트 데이터를 정규화한다. 기본적으로 테스트 데이터에서 계산한 값을 쓰면 안된다. test_data -=..

할때마다 새로 하는 것 같네 ㅠㅠ 진짜... 아직도 이러면 어떡해야 하는걸까...

from keras.datasets import reuters (train_data, train_labels), (test_data, test_labels) = reuters.load_data(num_words=10000) ''' word_index = reuters.get_word_index() reverse_word_index = dict( [(value, key) for (key, value) in word_index.items()]) decoded_review = ' '.join( [reverse_word_index.get(i -3, '?') for i in train_data[0]]) ''' import numpy as np #전처리 def vectorize_sequence(sequence, d..

본인이 탐조를 시작한 기점으로부터 본인이 관찰한 새의 최초 시점을 연대기식으로 작성해보기로 함. 기준은 네이처링 업로드 시점.(업로드 못한 자료는 관찰 시점) 관찰 시점과 이름을 알게 된 시점이 차이가 나면 이름을 알게 된 시점을 기준으로 작성하고 관찰시점 병기. 처음 관찰한 케이스는 첫 관찰, 첫 관찰이 아닌 경우 기록 시점을 기준. 사진 기록이 없는 경우나 소리만으로 한 기록도 인정. 아종의 경우 명확히 구별되는 경우는 아종별로 기록하되 종수에는 포함x (아종수는 괄호로 병기) 교잡종으로 기록된 경우 별도 표시. 암수의 경우 뚜렷하게 구별이 되는 경우, 따로 관찰했다면 따로 기록. (종수 변화 x) 해외에서 관찰한 종의 경우 국내 기록종을 기준으로 종수 기록하고 해외종의 경우는 따로 기록. -----..

from keras.datasets import imdb #영화 리뷰 데이터셋 (train_data, train_labels), (test_data, test_labels) = imdb.load_data(num_words=10000) #num_words=10000 자주 사용하는 단어 10000개만 사용 ''' word_index = imdb.get_word_index() reverse_word_index = dict( [(value, key) for (key, value) in word_index.items()]) decoded_review = ' '.join( [reverse_word_index.get(i -3, '?') for i in train_data[0]]) '''#리뷰 디코딩 테스트 impor..