Programming218 edit json in bash install jq https://stedolan.github.io/jq/manual/ sudo apt-get install jq 사용방법 jsonStr='{ "key1": "value1", "key2": "value2", "key3": "value3" }' jq 'del(.key3)' 2020. 5. 31. docker container에서 gpu 돌리기 nvidia-docker github https://github.com/NVIDIA/nvidia-docker add pacakage repositories distribution=$(. /etc/os-release;echo $ID$VERSION_ID) curl -s -L https://nvidia.github.io/nvidia-docker/gpgkey | sudo apt-key add - curl -s -L https://nvidia.github.io/nvidia-docker/$distribution/nvidia-docker.list | sudo tee /etc/apt/sources.list.d/nvidia-docker.list install nvidia-docker toolkit sudo apt-get.. 2020. 1. 6. git: gitlab - 개인 repository -> 그룹 repository로 이동 Gitlab - repository path: Settings > General > Advanced > Transfer Transfer 의 select bar 에서 group 선택 repository name 입력 후 엔터 git repository url 수정 vi .git/config 2019. 12. 31. AWS S3 - ec2에 mount 하기 - s3fs보다 2배 빠르다 - goofys AWS CLI 설치 sudo apt-get update sudo apt-get install -y python-pip sudo pip install awscli goofys 설치 golang 으로 만들어진 goofys 가 s3fs와 2배의 속도(read, write 모두) 차이가 남 실제 테스트 결과 - 2.4 GB write to S3 s3fs - 5 min goofys - 2 min golang 설치 sudo add-apt-repository ppa:gophers/archive sudo apt-get update sudo apt-get install golang-1.9-go sudo ln -s /usr/lib/go-1.9 /usr/lib/go ubuntu 16.04에서 설치가 안될 경우 sudo ad.. 2019. 12. 31. Data Ingestion, Gobblin Gobblin Download Gobblin release download : Release Page 압축풀기: tar -zxvf gobblin-distribution-…tar.gz cd gobblin-dist 환경설정 Gobblin job config directory: job 설정파일 저장할 폴더 환경변수: GOBBLIN_JOB_CONFIG_DIR 환경변수 JAVA_HOME 제대로 되어있는지 확인 Gobblin working directory: Gobblin의 job 출력, locks, state-store와 같은 정보 저장 환경변수: GOBBLIN_WORK_DIR export GOBBLIN_JOB_CONFIG_DIR=/var/javaApps/gobblin-dist/job-conf export GOB.. 2016. 9. 27. never search api 적용하기 - 자바 Never Search API 적용하기테스트 코드 / 실행 코드 package com.naver.api.service;import org.apache.catalina.util.URLEncoder;import org.slf4j.Logger;import org.slf4j.LoggerFactory;import org.springframework.stereotype.Service;import javax.transaction.Transactional;import java.io.UnsupportedEncodingException;@Service@Transactionalpublic class NaverApiService { Logger logger = LoggerFactory.getLogger(NaverApiS.. 2016. 9. 2. 이전 1 ··· 15 16 17 18 19 20 21 ··· 37 다음
