본문 바로가기
반응형

IT227

[GCP] QWIKLABS GSP787 - Insights from Data with BigQuery: Challenge Lab Query 1 SELECT sum(cumulative_confirmed) as total_cases_worldwide FROM `bigquery-public-data.covid19_open_data.covid19_open_data` WHERE date='2020-04-15' Query 2 with deaths_by_states as ( SELECT subregion1_name as state, sum(cumulative_deceased) as death_count FROM `bigquery-public-data.covid19_open_data.covid19_open_data` WHERE country_name="United States of America" and date='2020-04-10' and .. 2020. 12. 27.
[AWS] AWS CLI로 s3 log 확인하기 AWS를 사용하는 사람들이면 흔히 s3에 로그를 남기기 마련이다. 그러나 로그를 확인하기 위해서는 파일을 다운받고, 일일이 풀어서 보던지 해야하는 여간 귀찮은 것이 아니다. aws cli를 설치했을 경우에는 상대적으로 쉽게 확인할 수 있다. 왜냐면 grep 이나 zcat 등을 사용할 수 있으니.... aws cli에서 s3 서비스를 사용하는 것은 다음 페이지를 이용하자. docs.aws.amazon.com/ko_kr/cli/latest/userguide/cli-services-s3-commands.html AWS CLI에서 상위 수준(s3) 명령 사용 - AWS Command Line Interface PowerShell을 사용하는 경우 셸은 CRLF의 인코딩을 변경하거나, 파이프 입력이나 출력 또는 리.. 2020. 12. 24.
[AWS] EC2 인스턴스 타입 변경시 볼륨 명 변경 이슈 기존에 AWS t3 타입 인스턴스로 사용하던 인스턴스가 메모리 부족으로 잦은 gc로 인해 m5로 인스턴스 타입을 변경했는데, 볼륨이 추가되어있던 /log 가 마운트 되지 않는 것을 발견했다. fstab 에는 정상적으로 잡혀 있었고, [centos@ip-10-75-28-73 ~]$ cat /etc/fstab # # /etc/fstab # Created by anaconda on Tue Jun 5 14:06:12 2018 # # Accessible filesystems, by reference, are maintained under '/dev/disk' # See man pages fstab(5), findfs(8), mount(8) and/or blkid(8) for more info # UUID=8c15.. 2020. 9. 24.
코드를 공유할 수 있는 서비스 - codeimg SNS 나 기타 다른 곳에 코드를 공유 하기 위해서는 IDE 화면을 캡쳐하거나 코드를 Copy&Paste 하는 경우가 많은데, 가독성이 많이 떨어진다. SNS (페이스북, 트위터, 인스타그램)에 공유할 수 있는 서비스가 있어서 소개한다. https://codeimg.io/ 단순한 UI 라서 사용하는데 어렵지 않을듯 하다. 좌측메뉴에서 캔버스에서는 사이즈를 Window에서는 Mac / Window 창 디자인이, Editor에서는 에디터 형태를 선택할 수 있다. 상단에 New Project를 클릭하면 자주쓰는 형태를 템플릿으로 제공한다. R 코드 있던 걸 붙여 넣어봤다. 다운로드를 누르면 jpg 파일로 받아진다. 트위터 타입으로 했을 경우 페이스북 타입으로 했을 경우 하단과 우측에 스크롤 같이 보이는 것이 .. 2020. 9. 9.
[DB] 무료 DB 클라이언트 - DBeaver 최근에, AWS athena 와 GCP Big query 사용이 늘면서, 관련한 DB 클라이언트를 찾고 있었는데, oracle, mysql, Prostgre 등 다양한 DB를 지원하는 툴이 있어서 소개한다. dbeaver.io/download/ Download | DBeaver Community Download Tested and verified for MS Windows 7/8/10, Linux and Mac OS X. DBeaver requires Java 1.8 or higher. Windows and MacOS installers include OpenJDK 11 bundle. If you are on Mac OS X and you do NOT use PKG installer then you wi.. 2020. 9. 8.
[IBM] 이미지 인식 - Visual Recognition 사용하기 먼가 IBM 만의 특징을 찾던 중에, 아무래도 왓슨이 대표되는 것이라, 다른 서비스를 찾다가 발견한 것. Visual Recognition을 소개하고자 한다. Visual Recognition은 말 그대로 이미지 인식이다. 서비스를 생성해보자. 놀랍게도 서울 리전이 있다. 그래고 매월 1000개의 이벤트를 무료 제공해준다. 아무래도 서울이라서 그런지 생성은 금방 되는 편이다. 특이하게 curl을 제공한다. go, java, node, python, ruby를 제공하고 있었는데, 당연히 SDK 설치가 필요하다. 아마 나처럼 간편하게 curl 로 api 호출하지 않을까 싶다. API키는 왼쪽에 서비스 인증정보에 들어가면 확인할 수 있다. 키는 관리 메뉴에 들어가면 확인할 수 있지만, 서비스 인증정보 메뉴에 .. 2020. 9. 7.
[R] R 관련 무료 강의 - cognitive class R 관련 무료강의가 있어서 공유한다. https://cognitiveclass.ai/learn/data-science-r R 기본 뿐 아니라, 시각화, 머신러닝 강의도 있어서 입문 하는 사람들에게 좋을 듯 하다. 앞서 소개도 했었는데, [IT/Tips] - 온라인 무료 강의 사이트 - cognitive class 온라인 무료 강의 사이트 - cognitive class IBM Clouders 활동에서 필수로 지정된 교육으로 IBM Cloud Essential 뱃지 취득이 있다. Clouders 응모때에 필수로 "CLOUD CORE" 뱃지를 취득해야 했고, 7월 미션으로 "IBM Cloud Essentials V2" 뱃지를 취득해야.. newstars.tistory.com 여러개의 learning path.. 2020. 9. 5.
[AWS] AWS 사용을 돕는 크롬 Extensions 추천 - AWS Sidebar chrome.google.com/webstore/detail/aws-sidebar/eghlpalflfaopljcglmhoflhfpnngfpe AWS Sidebar AWS Console Navigation Sidebar for Chrome chrome.google.com 크롬에서 AWS 콘솔을 사용하다 보면, 서비스 간 이동이 불편하다. 상단에 pin 할수 있다고는 하지만, 브라우저 마다 설정해야되서... 설치를 하고 AWS 콘솔에 접속하면 우측에 AWS 라는 탭이 하나 생긴다. 저 탭을 클릭하면 열리는데, Console, Instances, Pricing 이 있다. 콘솔은 하단에 톱니 아이콘을 클릭해서 주요 사용하는 서비스들을 설정하면 되고, 인스턴스는 AWS 키를 등록하면 EC2 리스트들이 보인다. 프.. 2020. 9. 4.
[AWS] 내 계정으로 다른 계정 전환하기 - 역할전환 AWS A 계정과 B 계정이 있을때, A계정으로 B계정의 콘솔을 접근하고 싶다 그럴때 쓰는 역할 전환 맞는지 모르겠지만 난 이렇게 쓴다. AWS Console 우측상단에 계정명을 클릭해 보면 역할 전환 메뉴가 있다. B계정에서 역할을 만들고, A 계정에서 B계정의 역할을 액세스 하고 전환하는 과정을 거친다. 상단의 역할 전환 버튼을 누르면 계정 (AWS 계정 ID) : 접속할 B 계정의 숫자 코드 12자리 역할 (명칭) 표시 이름 색상을 선택하게 되어있다. 자 그럼 이제 역할 전환을 등록해보도록 하자. 1. 역할 만들기 역할 만들때는 A 계정의 AWS 계정 ID 등록이 필요하다. AWS 계정 ID 는 내 보안 자격 증명 에서 확인이 가능하다. 숫자를 기록해두자. 그럼 이제 B계정으로 바꿔서 역할을 만들어.. 2020. 9. 4.
반응형

티스토리툴바