https://stackoverflow.com/questions/18592173/select-objects-based-on-value-of-variable-in-object-using-jq Select objects based on value of variable in object using jq I have the following json file: { "FOO": { "name": "Donald", "location": "Stockholm" }, "BAR": { &quo... stackoverflow.com jq '.[] | select(.location=="Stockholm")' json { "location": "Stockholm", "name": "Walt" } { "location": "St..
https://news.hada.io/topic?id=8821&utm_source=slack&utm_medium=bot&utm_campaign=T8HUMDT45 dhapi - 동행복권 로또 6/45 구매하는 파이썬 라이브러리 | GeekNews 터미널에서 동행복권을 구매할 수 있게 만든 라이브러리입니다.pip install dhapi dhapi -U $YOUR_ID -P -K lotto645 -T buy -M auto -C 5 # -C 옵션은 1 ~ 5 사이에서 변경 가능. -K, -T, -M 은 고정. 동행복권 홈페이지를 news.hada.io https://github.com/roeniss/dhlottery-api/ GitHub - roeniss/dhlottery-api: 비공식 동행복권 API 비공..
uname -a cat /etc/issue cat /etc/redhat-release cat /etc/*release* getconf LONG_BIT https://ongal.tistory.com/190 리눅스에서 OS버전 확인하기. 리눅스에서 OS버전 확인하기 리눅스에서 버전을 확인하는 방법은 여러가지가 있습니다. 커널을 확인하거나 리눅스OS 버전을 확인할때 유용합니다. 아래 명령어들을 참조하시고 입맛에 맞게 골 ongal.tistory.com https://zetawiki.com/wiki/%EB%A6%AC%EB%88%85%EC%8A%A4_32%EB%B9%84%ED%8A%B8_64%EB%B9%84%ED%8A%B8_%ED%99%95%EC%9D%B8 리눅스 32비트 64비트 확인 - 제타위키 다음 문자열 ..
https://github.com/iandees/aws-billing-to-slack GitHub - iandees/aws-billing-to-slack: Send a daily AWS cost report to a Slack channel of your choice. Send a daily AWS cost report to a Slack channel of your choice. - GitHub - iandees/aws-billing-to-slack: Send a daily AWS cost report to a Slack channel of your choice. github.com https://ap-northeast-2.console.aws.amazon.com/events/home?region=ap..
이 세 가지 설정(conf)는 모두 Spark 클러스터에서 실행되는 다른 컴포넌트들이 사용하는 자바 환경 변수(JAVA_HOME)을 설정하는 데 사용됩니다. spark.yarn.appMasterEnv.JAVA_HOME: 이 설정은 Spark on YARN 모드에서 사용됩니다. 이는 Spark Application Master(즉, Spark의 클러스터 관리자)가 실행되는 노드에서 사용할 자바 환경 변수를 설정합니다. spark.driverEnv.JAVA_HOME: 이 설정은 Spark Standalone 모드와 Mesos 모드에서 사용됩니다. 이는 Spark 드라이버가 실행되는 노드에서 사용할 자바 환경 변수를 설정합니다. spark.executorEnv.JAVA_HOME: 이 설정은 Spark Stan..
user=seunggabi passwd=**** rm ~/enable_id_pw.sh cat ~/enable_id_pw.sh #!/bin/bash sudo userdel -r ${user} sudo adduser ${user} echo "${user}:${passwd}" | sudo chpasswd sudo userdel -r ${user}_su sudo adduser ${user}_su echo "${user}_su:${passwd}" | sudo chpasswd sudo chmod u+w /etc/sudoers sudo sed -i "/root\tALL=(ALL) \tALL/a${user}_su\tALL=(ALL) \tALL" /etc/sudoers sudo chmod 440 /etc/sudoers ..
https://cdcsman.tistory.com/entry/ubuntu-apt-%EC%84%9C%EB%B2%84-%EB%B3%80%EA%B2%BD%ED%95%98%EA%B8%B0?category=205024 ubuntu apt 서버 변경하기 kakao 서버로 변경(http://mirror.kakao.com/ubuntu/, 기본 서버는 속도가 느림) $ sudo sed -i s/kr.archive.ubuntu.com/mirror.kakao.com/g /etc/apt/sources.list $ sudo apt update 변경된 서버에서 정보 받아오기 $ sudo apt update 받기: cdcsman.tistory.com sudo sed -i s/kr.archive.ubuntu.com/mirror.ka..
https://docs.aws.amazon.com/ko_kr/emr/latest/ManagementGuide/emr-automatic-scaling.html 인스턴스 그룹에 대한 사용자 지정 정책과 함께 자동 조정 사용 - Amazon EMR 대부분의 워크로드에서 리소스 활용을 최적화하려면 확장 및 축소 규칙을 모두 설정하는 것이 바람직합니다. 다른 규칙 없이 어느 한 규칙만 설정하면 조정 활동 후에 인스턴스 수를 수동으로 docs.aws.amazon.com https://github.com/dwp/aws-analytical-env/blob/d9841645169ee0336494c504f4c220d202d1b0fc/terraform/modules/emr/templates/emr/autoscaling_pol..
https://www.amazonaws.cn/en/ec2/instance-types/ Amazon EC2 Instance Types Our support for Internet Explorer ends on 07/31/2022. Supported browsers are Chrome, Firefox, Edge, and Safari. www.amazonaws.cn https://aws.amazon.com/ko/emr/pricing/ 빅 데이터 처리 및 데이터 분석 – Amazon EMR 요금 – Amazon Web Services aws.amazon.com
https://yeo0.tistory.com/entry/AWS-EMR-MasterCoreTaskAutoScalingSpotInstance [AWS][EMR] EMR ( Master/Core/Task/AutoScaling/SpotInstance ) EMR은 기존 Hadoop에서의 Computing 부분을 그대로 구현해 놓은 플랫폼이라고 이해하면 된다. (Storage는 HDFS를 사용할수도 있지만, 주로 Object Strorage인 S3과 함께 사용한다.) Cloud 특성에 맞게 Auto Scaling yeo0.tistory.com
Athena의 스키마 업데이트 및 데이터 형식예상 스키마 업데이트 유형요약CSV(헤더 포함 및 불포함) 및 TSVJSONAVROPARQUET: 이름으로 읽기(기본값)PARQUET: 인덱스로 읽기ORC: 인덱스로 읽기(기본값)ORC: 이름으로 읽기 열 이름 바꾸기 CSV 및 TSV 또는 ORC 및 Parquet(인덱스로 읽는 경우) 형식으로 데이터를 저장합니다. Y N N N Y Y N 테이블의 시작 또는 중간에 열 추가 JSON, AVRO 또는 Parquet 및 ORC(이름으로 읽는 경우) 형식으로 데이터를 저장합니다. CSV 및 TSV를 사용하지 마세요. N Y Y Y N N Y 테이블 끝에 열 추가 CSV나 TSV, JSON, AVRO, ORC 또는 Parquet 형식으로 데이터를 저장합니다. Y Y..
https://velog.io/@hsh/DBT-Data-Build-Tool DBT: Data Build Tool - 일종의 체계적인 view 시스템 - `ELT`: Extract→Load→`Transform` (NOT `ETL`) velog.io https://kgw7401.tistory.com/72 dbt 꼭 써야할까? dbt 정의/사용이유/필요성 🔎dbt를 써야할까? 데이터 엔지니어링 프로젝트를 진행하면서 dbt라는 도구를 알게 되었다. 대충 파이프라인 효율적으로 관리해주는 도구라는 이야기를 듣고, 이번 프로젝트에 한 번 사용해봐야 kgw7401.tistory.com https://towardsdatascience.com/aws-athena-dbt-integration-4e1dce0d97fc AWS ..
d=db t=table p=partition ALTER TABLE ${d}.${t} SET TBLPROPERTIES('EXTERNAL'='TRUE'); ALTER TABLE ${d}.${t} DROP PARTITION (${p} ''); MSCK REPAIR TABLE ${d}.${t}; https://118k.tistory.com/349 [하이브] 매니지드 테이블과 익스터널 테이블 변경하기 하이브의 테이블은 매니지드(MANAGED) 테이블과 익스터널(EXTERNAL) 테이블 타입이 존재한다. 매니지드 테이블은 테이블을 drop 하면 관리하는 파일도 삭제가 되고, 익스터널 테이블은 파일은 보관된 118k.tistory.com https://stackoverflow.com/questions/46307667..
https://stackoverflow.com/questions/19750653/how-to-append-text-files-using-batch-files How to append text files using batch files How can I append file1 to file2, from a batch file? Text files and only using what is "standard" on windows. stackoverflow.com
#!/bin/bash input=$1 output=$2 rm $output n=0 while read line; do comma="${line//[^,]}" cnt="${#comma}" echo "Line No. ${n} : ${cnt}" >> $output n=$((n+1)) done < ${input} var="text,text,text,text" res="${var//[^,]}" echo "$res" echo "${#res}" ,,, 3 https://stackoverflow.com/questions/16679369/count-occurrences-of-a-char-in-a-string-using-bash Count occurrences of a char in a string using Bash I..
sudo systemctl list-units
https://stackoverflow.com/questions/2061439/string-concatenation-in-jinja String concatenation in Jinja I just want to loop through an existing list and make a comma delimited string out of it. Something like this: my_string = 'stuff, stuff, stuff, stuff' I already know about loop.last, I just need to stackoverflow.com
- Total
- Today
- Yesterday
- 테슬라 리퍼럴 코드 혜택
- 인스타그램
- 김달
- 어떻게 능력을 보여줄 것인가?
- 테슬라 크레딧 사용
- 테슬라 레퍼럴
- 테슬라 레퍼럴 적용 확인
- 개리마커스
- 테슬라
- 책그림
- COUNT
- 할인
- 테슬라 추천
- Kluge
- Bot
- 레퍼럴
- 모델y
- 팔로워 수 세기
- 유투브
- 테슬라 리퍼럴 코드 생성
- 모델 Y 레퍼럴
- wlw
- 클루지
- 메디파크 내과 전문의 의학박사 김영수
- 테슬라 리퍼럴 코드
- follower
- 연애학개론
- 테슬라 레퍼럴 코드 확인
일 | 월 | 화 | 수 | 목 | 금 | 토 |
---|---|---|---|---|---|---|
1 | 2 | 3 | 4 | 5 | 6 | |
7 | 8 | 9 | 10 | 11 | 12 | 13 |
14 | 15 | 16 | 17 | 18 | 19 | 20 |
21 | 22 | 23 | 24 | 25 | 26 | 27 |
28 | 29 | 30 |