일 | 월 | 화 | 수 | 목 | 금 | 토 |
---|---|---|---|---|---|---|
1 | 2 | 3 | 4 | 5 | ||
6 | 7 | 8 | 9 | 10 | 11 | 12 |
13 | 14 | 15 | 16 | 17 | 18 | 19 |
20 | 21 | 22 | 23 | 24 | 25 | 26 |
27 | 28 | 29 | 30 |
- 활성화함수
- Kubenetes
- 스파크
- 빅데이터
- 신경망학습
- 도커파일
- 신경망
- 데이터마이닝
- 딥러닝
- 하둡에코시스템
- docker
- 인공지능
- 논문리뷰
- Spark
- CNN
- 파이토치
- 강화학습
- ResNet
- 뉴럴네트워크
- 쿠브플로우
- 쿠버네티스
- VGGNet
- 분산처리
- 머신러닝
- 기계학습
- kubeflow
- dockerfile
- 도커
- 하둡
- hadoop
- Today
- Total
목록Etc (7)
Daily training log
wget "https://drive.google.com/uc?export=download&id=1O1yRuy9yHrTwSjd7AzmaQ6MJ8TOo-QhB" 다음과 같이 명령어를 입력할 경우 대용량 파일의 경우 다음과 같은 오류가 난다 --2021-10-05 08:07:17-- https://drive.google.com/uc?export=download&id=1O1yRuy9yHrTwSjd7AzmaQ6MJ8TOo-QhB Resolving drive.google.com (drive.google.com)... 173.194.216.113, 173.194.216.102, 173.194.216.101, ... Connecting to drive.google.com (drive.google.com)|173.194..

1. 도커를 왜 사용해야할까? Docker는 격리된 환경에서 프로세스를 실행시키기 위해 사용하는 컨테이너 기반의 가상화 플랫폼입니다. 파이썬 패키지들에 대해서만 격리된 환경을 제공하는 Anaconda와 다르게 Docker는 VM 수준의 가상화를 훨씬 빠르고 가볍게 제공하여 어떤 OS건, 어떤 환경에서건 동일한 프로그램의 실행과 관리를 가능케합니다. 일반적인 VM은 하이파이저를 반드시 거치고, 게스트 운영체제를 위한 라이브러리, 커널 등을 전부 포함하기 때문에 이미지의 크기가 커집니다. VM은 완벽한 운영체제를 생성할 수 있다는 단점도 있지만, 일반 호스트에 비해 성능 손실이 있을 수도 있으며, 수 기가바이트에 달하는 가상 머신 이미지를 애플리케이션으로 배포하기에 부담스럽습니다. 이에 비해 Docker는 ..

Mac OS Big Sur Version 11.1에서 진행 본인 설정에 맞춰 필요한대로 인스턴스를 생성해주자 1. 보안 그룹으로 들아가서 인바운드 규칙에 다음과 같이 추가해주자 * 모든 TCP 유형 선택 - 소스 : 내 IP 추가 * SSH 유형 선택 - 소스 : 내 IP 추가 * RDP 유형 선택 - 소스 : 내 IP 추가 위치 무관으로 소스 추가하면 편하지만 몇분 만에 해킹 당할 위험이 있다고 한다. 불편해도 꼭 내 IP로 소스를 여러번 해주자. 2. 연결 버튼을 누르면 터미널에서 접속할 수 있는 명령어를 보여주는데 이를 복사해 터미널에 입력한다 마지막 명령어를 복사해서 pem키 있는 위치에서 터미널을 키고 입력하면 쉽게 접속할 수 있다 ssh -i "[본인의 펨키 이름].pem" ubuntu@[본인..
1. 알고리즘 비쥬얼라이저 (https://algorithm-visualizer.org/) Algorithm Visualizer algorithm-visualizer.org - 핵심 알고리즘 소스코드와 시각화 자료를 제공한다 2. Big O 치트시트 (https://www.bigocheatsheet.com/) Big-O Algorithm Complexity Cheat Sheet (Know Thy Complexities!) @ericdrowell Know Thy Complexities! Hi there! This webpage covers the space and time Big-O complexities of common algorithms used in Computer Science. When prep..

1. 데이터 투 비즈 (www.data-to-viz.com) From data to Viz | Find the graphic you need A classification of chart types based on their input data format. www.data-to-viz.com - 데이터 타입이 수치형 / 범주형 / 혼합형 / 시계열 등인지에 따라 어떤 그래프를 그리는 것이 좋을지 한눈에 보기 좋게 정리한 사이트 2. Plotly (plotly.com/python/) 1. R과 비슷하다 2. 인터랙티브 그래프를 만들기 쉽다 3. 복잡한 그래프를 짧은 코드로 만들어준다 의 장점을 가진 파이썬 시각화 라이브러리 Plotly. 파이썬으로 인터랙티브 그래프를 짧은 코드로 만들어준다. 3. Alt..
ML from Scratch ( github.com/eriklindernoren/ML-From-Scratch ) Machine Learning From Scratch About Table of Contents Installation Examples Polynomial Regression Classification With CNN Density-Based Clustering Generating Handwritten Digits Deep Reinforcement Learning Image Reconstruction With RBM Evolutionary Evolved Neural Network Genetic Algorithm Association Analysis Implementations Supervise..

국내 1. 네이버 데이터랩 http://datalab.naver.com/ 2. 공공데이터 포털 https://www.data.go.kr/ 3. 서울시 데이터 - 서울연구데이터 서비스 http://data.si.re.kr/ - 서울 열린데이터광장 http://data.seoul.go.kr/ - 서울특별시 빅데이터 캠퍼스 https://bigdata.seoul.go.kr/data/selectPageListDataSet.do?r_id=P210 4. 빅데이터 분석 최신 동향 및 실습 데이터 제공 https://kbig.kr/#none 5. 금융관련 데이터 - 금융통계정보시스템 http://fisis.fss.or.kr/ - 금융위원회 http://www.fsc.go.kr/ - 한국금융연구원 http://www.k..