이제 딥러닝을 정리해 봅니다. 우선 딥러닝의 역사를 정리하여 보았습니다.
구글에서 "딥러닝의 역사"를 쳐 보면 많은 정보를 볼 수 있습니다.
그것을 정리해 본 것입니다. 물론 관련서적도 많이 참조하기도 했습니다.
계속 수정해 나갈 계획입니다. 참고 자료마다 조금씩 달라서 내용이 정확하게 맞지 않는 경우가 있습니다. 이 자료는 참고만 하시고 각자 추가하실 것을 권합니다. 그리고 틀린 부분이 있으시면 지적해 주시면 수정하도록 하겠습니다. |
딥러닝의 역사를 시간대 순으로 보면 도움이 되더라구요.
그런데 연도에 대하여 너무 세부적으로 신경을 쓸 필요가 없는 듯 합니다.
무슨 시험 공부하듯 하실 필요는 없고, 대략 그러하구나.. 정도
참고자료:
처음배우는 인공지능
Deep Learning with R
3분 딥러닝 케라스
2016년 3월
알파고 이세돌 9단과 4승 1패
2015년 10월
판 후이 2단과 다섯번 이김
알파고: 구글 딥마인드가 개발한 인공지능 바둑 프로그램
2014년 캐글에 Gradient Boosting Method 도입
2012년 중대한 시기
힌튼이 이끄는 단체, 대규모 이미지 분류 경진대회 "이미지넷(ImageNet)" 에 참여
2010년 이후 :
심층신경망 기반 이미지 인식 능력 향상
3차 인공지능 붐
2011년 IBM '왓슨' 퀴즈 대회 '제프디'에서 우승
2010년경 신경망 거의 무시
토론토대학 제프리 힌튼(Geoffrey Hinton)
몬트리올 대학 요슈아 벤지오(Yoshua Bengio)
뉴욕대학 얀 르쿤
2010년 랜덤포리스트
2009년 2월14일 ~2얼16일
IBM 슈퍼검퓨터 왓슨(Watson) 방송프로그램(제퍼지 Jeopardy)를 통해
최대우승자 : 브레드 리터
최다 승리 보유자 : 켄 제닝스와 대결 승리
2006년 토론토대학교 제프리 힌튼 교수, 다계층 인공신경망의 효율적 학습가능성을 보여주는 논문 발표
2000년~2006년 : 머신러닝 호황기
2006년이면 월드컵이 있던 해
2000년대 Decision Tree
1990년대 인터넷, 컴퓨터 기술 발달로 흥미를 얻게 되지만 다시 정체기
역전파 알고리즘 소개되기도 함
1997년 IBM 딥 블루 세계 체스참피온 가스파로트 대결에서 이김
1990년 초반 SVM 등장, 블라디미르 배프닉(Vladimir Vapnik)과 코리나 코르테스(Corinna Cores) 가 벨연구소에서 개발
1995년에 출판
1980년~2000년 : 딥러닝이 등장하고 새로 암흑기
1986년
올림픽이 개최되기 전 2년전... 어떻게 보면 최근의 일로 별로 오래되지도 않았네요.
Geoffrey Hinton 연구진이 다층퍼셉트론(MLP)을 소개 -> XOR 문제 해결
Hinton교수진 역전파(Back Propagation) 알고리즘을 제안, MLP 학습 가능케 됨
1980년대 전문가시스템 으로 다시 발전의 계기
발전을 못 보다가 1980년대에서 다시 한 번 발전의 계기를 맞이함
전문가시스템은 관련 지식이 방대하고 복잡하여 다시 암흑기로 들어감
1980년~2000년 2차 인공지능붐과 신경망의 암흑기
다층퍼셉트론과 오차역전파로 XOR 해결
1980년 컴퓨터 성능으로는 해결할 수 없다는 한계 도달 인식 암흑기를 맞이함
1969년 Minskey와 Papert 의 저서에서
퍼셉트론으로 AND, OR 은 해결할 수 있지만 XOR 연산은 할 수 없는 것이 밝혀졌습니다.
신경망의 관심이 급격히 줄어들게 됩니다.
1957년 퍼셉트론 발표(perceptron)
로젠블라트(Frank Rosenblatt)
1960년에 419혁명이 있었으니 바로 그 1~2년전이네요.
퍼셉트론
1956년
존 매카시 교수가 다트머스 회의에서 인공지능을 처음 주장하였다고 함...
이후 인공지능은 계속 발전하여 왔지만 초기 인공지능은 기술의 한계 때문에 뚜렷한 성과를 보이지 못함
1940년대
우리나라가 일제 치하에 있다가 독립하게 되는 그 즈음이 되겠네요.
1943년 최초로 인공신경망(Artificial Neural Network) 가 제안되었습니다.
인공신경망을 인간의 뇌에서 신경세포의 구조를 수학적으로 모델화한 것으로 생각하면 될 듯 합니다.
'머신러닝 > 10. 딥러닝' 카테고리의 다른 글
(R3)제09강_02 소프트맥스(softmax) (0) | 2021.05.21 |
---|---|
(R3)제09강(3.1)신경망 표기** wij 주의 - 출력 i 로 들어가는 입력 j (0) | 2021.05.12 |