본문 바로가기

딥러닝19

[PyTorch] PyTorch란? 파이토치의 구성요소, 파이토치로 텐서 조작하기 [PyTorch] PyTorch란? 파이토치의 구성요소, 파이토치로 텐서 조작하기 PyTorch(파이토치)? 딥러닝 프레임워크에는 Tensorflow와 PyTorch가있다. 교육용이나 회사에서는 Tensorflow를 많이 사용했지만 Tensorflow에 비해서 절차가 간단하고 속도도 빨라 최근 연구소에서 PyTorch를 많이 쓰고있는 추세라고한다. (결국에는 사용하는 프레임워크는 회사마다 다르기 때문에 둘 다 해두는 것이 좋겠다.) 나도 Tensorflow로 딥러닝을 먼저 접했지만 최근에 PyTorch로 모델링을 할 일이 있어서 공부해보기로 했다. ○ GPU 및 다른 가속기의 성능을 사용하기 위한 Numpy를 대체할 수 있다. ○ 신경망 구현에 유용한 자동미분 라이브러리를 제공한다. PyTorch(파이토.. 2022. 11. 19.

[PyTorch] 파이토치로 선형회귀 구현하기 / nn.Module [PyTorch] 파이토치로 선형회귀 구현하기,nn.Module Import import torch import torch.nn as nn import torch.nn.functional as F import torch.optim as optim torch: 텐서를 생성하는 라이브러리 torch.autograd: 자동미분 기능을 제공하는 라이브러리 torch.nn: 신경망을 생성하는 라이브러리 torch.multiprocessing: 병럴처리 기능을 제공하는 라이브러리 torch.utils: 데이터 조작 등 유틸리티 기능 제공 torch.legacy(./nn/.optim): Torch로부터 포팅해온 코드 torch.onnx: ONNX(Open Neural Network Exchange) 서로 다른 프레임.. 2022. 11. 19.

CCTV 이상행동 판별 시스템 제작 - 05. 사진찍기 -> 라벨링 -> 모델 학습의 무한 굴레 CCTV 이상행동 판별 시스템 제작 - 05. 사진찍기 -> 라벨링 -> 모델 학습의 무한 굴레 실력향상에는 실전에 뛰어드는 것이 최고라는 말이 괜히 있는게 아닌 것같다. 지금까지 공부는 잘~ 정제된 유명한 예제 데이터(MNIST, 타이타닉, IRIS 등..)를 가지고 모델 학습을 하는 법 위주로 실습해왔다. 이론적으로는 데이터 전처리가 인공지능의 80퍼센트를 차지한다고 배웠지만 예제 데이터로는 전처리를 집중적으로 한 적도 없고(많이 할 것도 없다), 그냥 모델만 잘 쌓아서 돌리면 정확도가 높게 나와 즐거웠다. 지금은 아니다.. 데이터가 인공지능에서 너무너무 중요하다는 사실을 깨닳는 요즘이다. 문제점 - 모델이 우리가 의도한 특징을 잡지 못함. 이 상황을 방지 하기 위해서 처음부터 사진을 찍을 때, 모델.. 2022. 8. 19.

CCTV 이상행동 판별 시스템 제작 - 04. 다시시작! 데이터셋 사진찍기(feat.labelImg) CCTV 이상행동 판별 시스템 제작 - 04. 다시시작! 데이터셋 사진찍기(feat.labelImg) 사진을 찍자! 결국..힘들게 정제한 데이터셋을 버리고 특징을 확실히 잡을 수 있는 데이터셋을 직접 만들기로 했다. 그리고 기존에 7개였던 카테고리 중 비슷하게 인식 될만한 것들을 다 버리고 (폭행, 실신, 기물파손, 계단전도, 개집표기 무단진입) 5개로 줄였다. 일단 특징이 되는 것들을 학습시키고 점점 데이터셋을 늘려가면서 조정하는 방법을 선택! 정말 데이터셋을 직접 만들지는 상상도 못했다ㅋㅋㅋ 파트너, 옷, 장소를 바꿔가면서 상황별로 40장씩 촬영을 했다. 사진의 양은 적지만 yolov5 자체가 Augmentation을 해주는 점을 이용해서 처음엔 적은 용량으로 시작했다. 🚫 촬영 시 주의한 점! 🚫 .. 2022. 8. 18.

CCTV 이상행동 판별 시스템 제작 - 03. YOLOv5 모델 훈련시키기 CCTV 이상행동 판별 시스템 제작 - 03. YOLOv5 모델 훈련시키기 CCTV 이상행동 판별 시스템 제작 - 02. 데이터셋 확보 및 정제 / YOLOv5 labels.txt 만들기 CCTV 이상행동 판별 시스템 제작 - 02. 데이터셋 확보 및 정제 계획은 완벽했다. 하지만 실전은 달랐다. 1. AI hub AI hub에 있는 데이터들을 다운 받아서 모델 돌리기만 하면 끝~!? 이라고 안일 eunjibest.tistory.com ↑↑↑↑↑↑↑ 모든 데이터 준비가 끝났으니, 이제는 훈련시키는 일만 남았다. (행복회로 돌리기) 이미지 디텍션하기에 최적화된 모델을 사용하고, 데이터도 만들었겠다 학습만 잘하면 프로젝트 끝?!인줄..ㅎ YOLOv5 훈련 준비 데이터셋만 준비된다면 모델 자체를 커스텀하지 않.. 2022. 8. 17.

Hands-On Machine Learning(핸즈온 머신러닝) - 10장 연습문제 Hands-On Machine Learning(핸즈온 머신러닝) - 10장 연습문제 1장부터 9장까지는 머신러닝 내용이니, 머신러닝 카테고리 10장부터 19장까지는 딥러닝 내용이니, 딥러닝 카테고리에 포스팅을 하기로 하겠다. 1번 텐서플로 플레이그라운드를 방문해서 연습문제에 나온대로 사용해보세요. Tensorflow — Neural Network Playground Tinker with a real neural network right here in your browser. playground.tensorflow.org 텐서플로우 플레이 그라운드는 딥러닝 신경망 시뮬레이터이다. 복잡한 코드를 입력하지 않고, 클릭만으로 어떤 신경망들이 어떤 효과를 내는지 시각적으로 한눈에 볼 수 있다. 신경망의 레이어를 .. 2022. 7. 19.

머신러닝(Machine Learing)이란? 오차함수 MAE(mean absolute error)/MSE(mean squared erro) 머신러닝(Machine Learing)이란? 오차함수 MAE(mean absolute error)/MSE(mean squared erro) 블로그를 운영하면서 머신러닝에 대해 글을 쓴 것이 없다느는 것을 알고 놀랬다. 어제 공부한 내용을 토대로, 머신러닝이란 무엇인지? 머신러닝의 오차함수에 대해서 포스팅하려고한다. 머신러닝이란? 데이터에서부터 학습하도록 컴퓨터를 프로그래밍을하는 과학.또는 예술(?)이라고 책에 써있다. 말 그대로 기계학습이다. 이런 사전적인 의미말고, 수학적으로 머신러닝이 무엇인지? 목적은 무엇인지 살펴보자. 다음과 같은 샘플 그래프가 있다. 그래프를 해석해본다면, 삶의 만족도가 높을 수록 GDP도 높다는 것을 알 수 있다. 이 그래프의 정보를 토대로 삶의 만족도와 GDP와의 관계를 예측.. 2022. 7. 1.

[딥러닝] LSTM(Long Short Term Memory) [딥러닝] LSTM(Long Short Term Memory) LSTM의 구조도 이다. 앞선 RNN의 구조와 크게 별 다를게 없어 보이지만 자세히 보면 무언가가 추가 됐다. RNN은 A로 넘어가는 선? (화살표)이 하나지만 LSTM은 한 줄이 더 생겼다. 윗쪽 선은 Long Term Memory(장기기억) 아랫쪽 선은 Short Term Memory(단기기억) 이다. 잠시 Vanilla RNN의 문제점을 생각해보자면 첫 인풋 데이터의 A(weight)가 마지막까지 못간다는 것이였다. 하지만, LSTM에서는 중요도가 높은 인풋데이터를 Long Term Memory에 넣어줌으로써 weight의 값이 마지막까지 유지될 수 있게 해준다. A안에는 복잡한 게이트들이 다양하게 있다. 만약 Long Term Memo.. 2022. 2. 25.

[딥러닝] RNN (Recurrent Neural Network) - 순환신경망 구조 [딥러닝] RNN (Recurrent Neural Network) - 순환신경망 구조 RNN은 자연어 처리를 한다던지, 주가 예측을 한다던지 시간의 흐름이 매우 중요한 시계열 데이터에 적합한 모델이다. 기본적인 RNN 구조도이다. 하나씩 뜯어보면 인풋값이 X0으로 들어가서 -> A에서 어떤 가중치(w)에 대한 계산이 되고, -> 결과값이 h0이된다. -> 첫번째 A 가중치(w)가 두번째 A로 전달이 되면서 인풋값 X1과 합쳐져고 -> 결과값 h1이 된다. -> 두번째 A 가중치가 세번째 A로 전달이 되고 인풋값 X2와 합쳐지고... 이런식으로 계속 전달 전달 전달...이 되는 구조인 것을 확인할 수 있다. 위에 기본적인 구조를 Vanilla RNN이라고 한다. 가장 초기 버전이다. 이 Vanilla RN.. 2022. 2. 24.

[딥러닝] Embeding Layer / 차원의 저주 (curse of dimensionality) /자연어 처리 / 단어 백터화 [딥러닝] Embeding Layer / 차원의 저주 (curse of dimensionality) /자연어 처리 / 단어 백터화 차원의 저주 (curse of dimensionality) I am a boy and I am not a girl 위 문장의 각각의 단어들에 고유의 숫자를 줘보았다. I -> 0 am -> 1 a -> 2 boy -> 3 and -> 4 not -> 5 girl ->6 이 숫자들을 one-hot encording을 해줘야한다. 왜냐하면 각각의 숫자에 연관성을 없애주기 위해서이다. 예를 들면 am + a = boy 이런식으로 관계가 지어져서 이상한 해석을 할 수 있기 때문이다. one-hot encording을 해주면 I -> [1, 0, 0, 0, 0, 0, 0 ] am ->.. 2022. 2. 23.

이전 1 2 다음

티스토리툴바