티스토리

딥러닝 메모장
검색하기

블로그 홈

딥러닝 메모장

gldmg.tistory.com/m

딥러닝 공부중

구독자
3
방명록 방문하기

주요 글 목록

  • 크롬(chrome)에서 Google Meet 마이크 연결 및 인식이 안될 때 마이크를 정상적으로 연결하였으나, Google Meet(hangout) 등의 사이트에서 마이크 인식이 안되는 경우가 발생할 수 있다. 해결 방법은 아래와같이 해당 사이트 설정에서 마이크 권한을 허용해주면 된다. [해결 방법] 1. 사이트 주소 옆 '자물쇠 모양 버튼' 클릭 2. '사이트 설정' 클릭 2. 마이크가 '요청(기본값)' 또는 '차단'으로 되어있을 텐데, 이를 '허용'으로 변경 3. 새로고침하면(또는 껐다가 다시 들어가면) 잘 인식되는 것을 볼 수 있음 공감수 0 댓글수 2 2020. 6. 18.
  • docker (nvidia-docker) 기본 사용 [설치] 1. docker 설치 curl -fsSL https://get.docker.com/ | sudo sh 2. nvidia-docker 설치 아래 사이트를 참고하여 설치 https://github.com/NVIDIA/nvidia-docker 3. [선택] sudo 명령 간소화 sudo usermod -aG docker $USER 위 명령어를 수행 후 재부팅 [Docker 기초 커맨드] docker pull [NAME]: 도커 허브로부터 도커 이미지 다운로드 docker create [IMAGE]: 이미지로부터 컨테이너 생성 docker exec [CONTAINER] [COMMAND] : 특정 컨테이너를 대상으로 커맨드 수행 docker attach [CONTAINER]: 특정 컨테이너 접속 doc.. 공감수 0 댓글수 0 2020. 2. 12.
  • (작성중) Convolutional Neural Network 정리 아직 작성중.. ※ General Network ※ 1. LeNet (1998) LeNet-1 (1990): CNN 개념 수립 LeNet-5 (1998): - Average Pooling 사용 (Subsampling) - 각 feature를 구하기 위해 이전 conv layer의 output feature 중 일부만을 사용. (다양한 조합의 feature들을 사용하여 global feature를 추출하고자함) 2. AlexNet (2012), [ILSVRC 2012] - ILSVRC(ImageNet Large-Scale Visual Recognition Challenge) 2012에서 우승 - 네트워크를 크게 두 부분으로 나눈 뒤 GPU 병렬 연산 수행 (단순히 큰 네트워크를 처리하기 위함) - ReLU.. 공감수 0 댓글수 1 2019. 12. 20.
  • AUGMIX: A SIMPLE DATA PROCESSING METHOD TO IMPROVE ROBUSTNESS AND UNCERTAINTY AUGMIX: A SIMPLE DATA PROCESSING METHOD TOIMPROVE ROBUSTNESS AND UNCERTAINTY google AI research 팀이 발표한 논문 ICLR 2020에서 발표될 예정 paer : https://arxiv.org/abs/1912.02781 code : https://github.com/google-research/augmix 주제: Data Augmentation 방법 제안 AugMix는 이름처럼 여러 data augmentation 방법들을 혼합하여 사용한다. 하지만 기존 방법들과 달리 데이터 변환으로인한 manifold를 벗어나는 일을 방지하였다. 논문에서는 단순히 데이터를 변형시켜서 새로운 샘플을 만들어내는데에 그치지 않고 original 데이.. 공감수 0 댓글수 0 2019. 12. 18.
  • windows 10에서 ssh 연결 지속시키기 ssh_config 파일을 만들고, Host * ServerAliveInterval 60 ServerAliveCountMax 30 라고 적어 넣는다. 그리고 ssh 커맨드에 "-F ssh_config" 옵션을 추가하면 됨. ex) ssh -F ssh_config name@host -p 7777 공감수 0 댓글수 0 2019. 12. 4.
  • terminal에서 google drive 파일 받기 FILEID: 다운로드 링크 주소에 id={???}에 해당되는 값 * 일반 크기의 파일 wget --no-check-certificate 'https://docs.google.com/uc?export=download&id=FILEID' -O FILENAME * 큰 크기의 파일 ("파일이 너무 커서 Google에서 바이러스를 검사할 수 없습니다. 그래도 파일을 다운로드하시겠습니까?" 라고 뜨는 파일들) curl -c ./cookie -s -L "https://drive.google.com/uc?export=download&id=FILEID" > /dev/null curl -Lb ./cookie "https://drive.google.com/uc?export=download&confirm=`awk '/dow.. 공감수 4 댓글수 0 2019. 12. 2.
  • Ubuntu 'killed' 오류 가끔 모델 학습이나 테스트를 진행하다보면 난데없이 'killed'라는 문구만 뜨고 종료될 때가 있다. 상당히 당혹스러운데, 찾아보니 sudo dmesg 명령을 통해 로그를 확인할 수 있다. 그리고 이런 경우는 대부분 RAM(GPU RAM 아님) 문제라고한다. 참고로 램 용량은 free 또는 free -m (MB단위) 로 확인할 수 있다. 공감수 1 댓글수 0 2019. 10. 24.
  • anaconda SSL 관련 오류 해결 오류 내용 --------------------------------------------------------------------- Collecting package metadata (current_repodata.json): failed CondaHTTPError: HTTP 000 CONNECTION FAILED for url Elapsed: - An HTTP error occurred when trying to retrieve this URL. HTTP errors are often intermittent, and a simple retry will get you on your way. If your current network has https://www.anaconda.com blocked, .. 공감수 54 댓글수 16 2019. 10. 18.
  • [zipfile] python 3.x 한글 압축 파일 풀기 zipfile을 이용하면 zip 파일의 압축을 해제할 수 있다. 파일이 한글일 경우 깨짐 현상이 발생하는데, 구글링하면 이를 해결한 글을 찾을 수 있다. http://www.hanbit.co.kr/media/channel/view.html?cms_code=CMS8947142043 파이썬을 사용해 한글 파일명을 포함한 ZIP 파일 압축 해제 ZIP 압축과 인터넷 인터넷을 사용하는 인구가 늘면서 많은 사람이 대용량의 파일을 주고 받기 시작했다. 인터넷 이전의 지역적인 통신망이었던 PC 통신에서도 여러 개의 파일을 주고 받기 위해 다양한 압축 유틸리티가 사용되었다. 많은... www.hanbit.co.kr 그런데 python 2.x만 가능하고, python 3.x에는 적용되지 않는다. python 3.x 관련.. 공감수 12 댓글수 2 2019. 6. 18.
  • log softmax vs softmax https://discuss.pytorch.org/t/logsoftmax-vs-softmax/21386 요약log softmax의 loss값이 softmax보다 좀 더 크다 (처벌 강화) 공감수 0 댓글수 0 2019. 3. 6.
  • 멀티프로세싱 및 진행 사항 확인 https://code.i-harness.com/ko-kr/q/567710https://stackoverflow.com/questions/5666576/show-the-progress-of-a-python-multiprocessing-pool-map-call 공감수 0 댓글수 0 2019. 2. 26.
  • 모델링, 학습, 테스트 수시 업데이트. Modeling - 특징간 결합 시, 같은 도메인인지 살펴볼것. - CNN, RNN, FNN 등 각 네트워크 특징들을 잘 생각해볼것. - pooling, 특징간 결합 방법들은 의도에 따라 선택 - 학습 성능이 낮을 시, 우선 단순한 방법으로 모델 크기를 늘려볼것. (유닛 수, 계층 반복 등) Data - 모든 데이터는 전처리가 필수 - 전처리 시, 의도대로 되었는지 꼭 시각화(또는 print)해서 확인 Train - output 특징에 따라 loss 선별 (상당히 중요) ex) 매우 작은 값의 regression이면, mse는 부적절 (l1, smooth l1이 나음) - 여러 loss가 나올 때, 가중치를 의도 및 실험적으로 선택 (생각 이상으로 영향을 많이끼침) - 직접적인 출력값을 .. 공감수 0 댓글수 0 2019. 2. 20.
  • [range-key-dict] 범위 dictionary (range tree) 패키지 설치 방법pip install range-key-dict 사용법from range_key_dict import RangeKeyDict range_dict = RangeKeyDict({(0.5, 104.12): 'apple',(104.12, 232): 'tomato',(232, 400): 'banana'}) range_dict[50] # 'apple'range_dict.get(300.51, 'none') # 'banana'range_dict.get(1000, 'none') # 'none' 공감수 0 댓글수 0 2019. 2. 19.
  • requirements.txt 생성 pip freeze > requirements.txt 공감수 0 댓글수 0 2019. 2. 5.
  • windows 10 conda install/update 먹통 conda update condaconda install nb_conda등 몇몇 패키지들이 설치가 안되는 경우가 있다.증상 : Solving environment: / 만 뜨다가 그냥 종료. 이는 Windows Defender 때문에 일어나는 문제이다.Windows Defender에 들어가서방화벽 및 네트워크 보호에 도메인/개인/공용 네트워크를 모두 비활성화 시키면 해결된다. 공감수 2 댓글수 1 2019. 1. 29.
  • 알면 좋은 개념 및 유용한 기본 모듈/함수들 개념 자료형 : https://blog.colab.kr/2언더스코어(_) 개념 : https://mingrammer.com/underscore-in-python/getter/setter 필요성 : https://mygumi.tistory.com/161 기본 모듈/함수 파일 경로 : https://hashcode.co.kr/questions/197/python%EC%9C%BC%EB%A1%9C-%ED%98%84%EC%9E%AC-%EB%94%94%EB%A0%89%ED%86%A0%EB%A6%AC-%EC%9C%84%EC%B9%98%EB%A5%BC-%EC%95%8C%EC%95%84%EB%82%B4%EB%8A%94-%EB%B0%A9%EB%B2%95UUID : https://code.tutsplus.com/ko/tut.. 공감수 0 댓글수 0 2019. 1. 27.
  • cnn 설계 시 주의 정보 손실을 매우 조심해야함.즉, Feature 추출(conv ..)보다, pooling을 더 조심스럽게 사용해야함. 어떤 feature가 필요할지를 생각.입력 사이즈가 4:3 비율이라서, pooling도 4:3 비율로 해주면 폭망이는 단순히 세로/가로 크기만 다르고, 각 축의 정보밀도는 동일하기 때문인데,pooling 비율을 다르게 주면 같은 수준의 정보를 다른 수준으로 여기고 추출하는 꼴임. 공감수 0 댓글수 0 2019. 1. 15.
  • code 공부 https://github.com/fizyr/keras-retinanet/tree/master/keras_retinanet/utilshttps://github.com/ronghanghu/cmnhttps://github.com/yikang-li/MSDNhttps://github.com/danielgordon10/thor-iqa-cvpr-2018 https://github.com/allenai/ai2thor 공감수 0 댓글수 0 2019. 1. 8.
  • anaconda upgrade 아래 커맨드 입력conda upgrade conda 공감수 0 댓글수 0 2019. 1. 4.
  • 활성화함수 http://nittaku.tistory.com/267 공감수 0 댓글수 0 2018. 12. 27.
  • 나이브 베이지안 분류 (Naive Bayesian Classification) 자꾸 까먹는다.. http://bcho.tistory.com/1010'나이브'인 이유는 각 데이터의 발생 확률을 독립으로 본다는 가정이 있기 때문이다.확률값이 너무 작은 경우를 방지하기위해, Log를 이용해서 구하는 방법도 사용 가능. 공감수 0 댓글수 0 2018. 12. 21.
  • 용어 정리 fine-grained : 세밀한, 한 과정을 나누어 처리 coarse-grained : 세분화되지 않고 한꺼번에 처리되는 형태 activation map : feature map과 동일한 개념 (layer의 activation function까지 거쳐서 나온 행렬 데이터) sparse : 희박한, activation된 값이 드물거나, 대부분 0으로 차있는 형태 sparsity가 높다고도 말함. l1 norm을 사용하면 weight의 sparsity를 높일 수 있음 (weight 값 자체를 낮추도록 학습하므로) dense 공감수 0 댓글수 0 2018. 11. 22.
  • 여러가지 convolutional layer https://zzsza.github.io/data/2018/02/23/introduction-convolution/ 공감수 0 댓글수 0 2018. 11. 16.
  • load_state_dict 성능 문제, [nn.ModuleList] 학습을 끝내고 성능 테스트 때 괜찮은 성능을 보였다.그런 모델을 저장하고, 다른 코드에서 load_state_dict 으로 불러들여서 사용하려한다. 근데 모델을 저장하기 전 성능이 나오질 않는다. 이럴 땐 일부 레이어를 list 안에 넣어놨는 지 의심해야한다.model 클래스는 다 nn.Module을 상속해서 정의하는데,self의 속성으로 레이어를 직접 정의하지 않고,self.layers = [nn.Linear, nn.Conv2D 등..] 식으로 저장하고 사용했다면위와 같은 문제가 발생한다. 그 이유는 list로 저장해두면 모델 저장 시, 이 레이어들이 인식되지 않는다.그래서 list안의 레이어들만 빼놓고 나머지 layer들의 weight만 저장된다. 이에 따라 다른 코드에서 load_state_dict.. 공감수 4 댓글수 2 2018. 11. 8.
  • Pytorch eval 성능 문제 eval 모드로 학습한 네트워크를 실험해보면성능이 엄청나게 낮아지는 현상을 발견했다. 처음엔 그냥 학습이 안되서 그런건 줄 알았는데,진짜 일주일 동안 별짓 다하다가 pytorch의 버그라는걸 알게됬다. 검색해보니 이미 유명한 버그다.문제는 batchnorm 얘 때문이다.eval 할 때 momentum 값이 제대로 초기화되지 않아서 발생하는 것 같다.pytorch 1.0이 새로 나왔던데, 해결했는지는 모르겠다.그 전의 최신버전은 0.4.1 버전도 이 문제를 갖고있다.화남 그리고 이번에 여러 네트워크를 동시에 사용하려 했는데,여러 네트워크를 정의해도 위처럼 성능이 저하되는 문제를 발견했다.진짜 이건 이유를 모르겠다. 해결법도 모르겠어서 분석중이다.. 공감수 0 댓글수 0 2018. 11. 8.
  • Object Detector YOLOv3, SSD, FPN, RetinaNet 개념들 정리https://medium.com/@jonathan_hui/what-do-we-learn-from-single-shot-object-detectors-ssd-yolo-fpn-focal-loss-3888677c5f4d 공감수 0 댓글수 0 2018. 11. 7.
  • Ubuntu 설치 시 nouveau 오류, 빈화면 문제 Ubuntu 설치 시 nouveau 오류를 볼 수 있는데,이는 nvidia와 충돌되어 나타나는 오류라고한다. 그리고 우분투 설치 후, 부팅 시 보라색 화면만 뜨고,아무것도 뜨지 않는 현상이 발생하는데이는 내가 생각했을 때, 메인보드 세팅의 문제이다. 1. nouveau 오류우분투 설치 시 install 메뉴에서'e'를 누른다.그러면 텍스트 창이 뜰텐데,quiet splash 라고 쓰인 부분 뒤에 nomodeset 을 입력한다.--- 가 있으면 이는 지우고 입력.quiet splash --- => quiet splash nomodeset그리고 F10을 눌러 설치를 진행한다.그러면 noueau 오류는 사라져있다. 2. noueau 오류를 해결했는데, 부팅 시 빈 화면만 나오는 경우시모스세팅창에서 boot 부.. 공감수 0 댓글수 0 2018. 10. 31.
  • optimizers http://shuuki4.github.io/deep%20learning/2016/05/20/Gradient-Descent-Algorithm-Overview.html 공감수 0 댓글수 0 2018. 10. 21.
  • Loss Functions https://isaacchanghau.github.io/post/loss_functions/ CE : https://icim.nims.re.kr/post/easyMath/550 공감수 0 댓글수 0 2018. 10. 21.
  • 데이터 전처리 계속 수정 예정. Outlier 제거 : https://tariat.tistory.com/29 공감수 0 댓글수 0 2018. 10. 21.
    문의안내
    • 티스토리
    • 로그인
    • 고객센터

    티스토리는 카카오에서 사랑을 담아 만듭니다.

    © Kakao Corp.