[Docker] DinD(Docker in Docker) vs DooD(Docker out of Docker)

docker run --privileged --name dind1 -d docker:20.10.5-dind docker run -it -v /var/run/docker.sock:/var/run/docker.sock docker https://m.blog.naver.com/PostView.naver?isHttpsRedirect=true&blogId=isc0304&logNo=222274955992 도커 컨테이너 안에서 도커 실행하기(Docker in Docker, Docker Out of Docker) 이번 시간은 도커를 사용해 컨테이너에서 컨테이너를 실행하는 방법을 알아봅니다. 도커 컨테이너 내에서 ... blog.naver.com
공부 2022. 11. 7. 21:52
[cURL] login cookie -> call api

ID=$1 PW=$2 curl \ -X POST \ -d "id=${ID}&pw=${PW}" \ --cookie-jar cookie {login URL} curl \ -v \ --cookie cookie {call API} https://yougome.tistory.com/452
공부 2022. 11. 7. 21:36
[flask] importerror: cannot import name soft_unicode from markupsafe (Solved)

pip install markupsafe==2.0.1 https://www.datasciencelearner.com/importerror-cannot-import-name-soft-unicode-from-markupsafe-solved/ importerror: cannot import name soft_unicode from markupsafe (Solved) importerror: cannot import name soft_unicode from markupsafe error occurs because of incompatibility of markupsafe package. www.datasciencelearner.com
공부 2022. 11. 7. 20:51
[pandas] How to select rows based on column values

https://www.statology.org/pandas-select-rows-based-on-column-values/ Pandas: How to Select Rows Based on Column Values - Statology This tutorial explains how to select rows based on column values in pandas, including several examples. www.statology.org
공부 2022. 11. 7. 20:48
[Hadoop] `HDFS` vs `S3`

https://www.integrate.io/blog/storing-apache-hadoop-data-cloud-hdfs-vs-s3/ Storing Apache Hadoop Data on the Cloud - HDFS vs. S3 Ken and Ryu are both the best of friends and the greatest of rivals in the Street Fighter game series. When it comes to Hadoop data storage on the cloud though, the rivalry lies between Hadoop Distributed File System (HDFS) and Amazon's Simple Storage Serv www.integrat..
공부 2022. 11. 7. 20:41
[Spark] withColumnrenamed

df.withColumnRenamed("dob","DateOfBirth") .printSchema() https://sparkbyexamples.com/spark/rename-a-column-on-spark-dataframes/
공부 2022. 11. 7. 20:35
[Python][smtplib] Gmail

https://coding-kindergarten.tistory.com/204 [python/smtplib] 파이썬으로 구글 Gmail 보내기 1편. SMTP의 개념과 구글 앱 비밀번호 발급받기 안녕하세요, 왕초보 코린이를 위한 코딩유치원에 오신 것을 환영합니다. 코딩유치원에서는 파이썬 기초부터 사무자동화, 웹크롤링, 데이터 분석 등의 다양한 패키지까지 초보자도 알기 쉽도록 coding-kindergarten.tistory.com
공부 2022. 11. 7. 20:28
[Spark] `repartition` vs `coalesce`

repartition: swap coalesce: repartition optimized https://sparkbyexamples.com/spark/spark-repartition-vs-coalesce/ Spark Repartition() vs Coalesce() Spark repartition() vs coalesce() - repartition() is used to increase or decrease the RDD, DataFrame, Dataset partitions whereas the coalesce() is used to only decrease the number of partitions in an efficient way. In this article, you will learn wh..
공부 2022. 11. 7. 20:25
[Gradle] Error: Could not find or load main class org.gradle.wrapper.GradleWrapperMain

remove `*.jar` in `.gitignore` https://fun-coding-study.tistory.com/308 Error: Could not find or load main class org.gradle.wrapper.GradleWrapperMain 위 오류는 gradle/wrapper에서 gradle-wrapper.jar 파일이 없어서 발생하는 오류였다. 그래서 .gitignore에서 *.jar을 제거하니 gradle-wrapper.jar 파일을 커밋 할 수 있었다. fun-coding-study.tistory.com
공부 2022. 11. 7. 20:22
[Spark] dataframe to table

my_DF.createOrReplaceTempView("my_temp_table"); spark.sql("drop table if exists my_table"); spark.sql("create table my_table as select * from my_temp_table"); https://stackoverflow.com/questions/42261701/how-to-create-hive-table-from-spark-data-frame-using-its-schema How to create hive table from Spark data frame, using its schema? I want to create a hive table using my Spark dataframe's schema...
공부 2022. 11. 7. 20:18
[HBase] tuning

hbase.regionserver.handler.count 30 -> 100 hbase.rpc.timeout 90000 -> 180000​ hbase.client.write.buffer hbase.regionserver.handler.count hbase.hregion.memstore.flush.size hbase.regionserver.global.memstore.upperLimit hbase.hregion.max.filesize hbase.hstore.blockingStoreFiles hbase.client.scanner.caching hbase.rpc.timeout https://dydwnsekd.tistory.com/34 HBase 튜닝하기 하둡 클러스터 운영중 HBase read/write 관련..
공부 2022. 11. 7. 15:58
[bitbucket] gradle build & s3 deploy

bitbucket-pipelines.yml image: gradle:6.6.0-jdk11 pipelines: pull-requests: '**': - step: script: - cd ./package - ./gradlew build custom: s3-prod-mdp-batch: - step: script: - cd package - ./gradlew jar - cd .. - mkdir -p bucket/seunggabi/prod/jar/seunggabi-batch - cp seunggabi/build/libs/seunggabi-batch.jar bucket/seunggabi/prod/jar/seunggabi-batch/ artifacts: - bucket/** - step: script: - pipe..
공부 2022. 11. 7. 15:53
[AWS] graviton

https://sungwookkang.com/1493 [AWS] What is AWS Graviton processor? [AWS] What is AWS Graviton processor? l Version : Amazon Web Service 이번 포스트는 AWS에서 출시하여 제공하고 있는 AWS Graviton 프로세서가 무엇인지 알아본다. Graviton 프로세서에 대한 성능 및 기존 X86.. sungwookkang.com https://aws.amazon.com/ko/ec2/graviton/ AWS Graviton - Amazon Web Services M6g, C6g, R6g M6gd, C6gd, R6gd C6gn T4g X2gd aws.amazon.com
공부 2022. 11. 7. 15:45
[AWS] SES (email)

https://aws.amazon.com/ko/premiumsupport/knowledge-center/ses-set-up-connect-smtp/ Amazon SES를 사용하여 SMTP 설정 및 연결 Amazon SES를 사용하여 SMTP를 설정하고 연결하려면 어떻게 해야 합니까? 최종 업데이트 날짜: 2022년 8월 17일 Amazon Simple Email Service(Amazon SES)에 SMTP(Simple Mail Transfer Protocol)을 설정하고 싶습니다. Amazon S aws.amazon.com
공부 2022. 11. 7. 15:15
[Windows] 정품인증

https://ivyit.tistory.com/298 윈도우11 정품인증 방법 (Windows를 정품인증 합니다. 메세지 삭제) 기본적으로 정품 윈도우를 사용하다가 업그레이드를 하면 기존의 인증되어있는 그대로 인증이 가능합니다. 하지만, 윈도우를 재설치하시거나 인증이 되어있지 않으면 윈도우를 설치하고 일정 ivyit.tistory.com
공부/툴 2022. 11. 7. 15:14
일반인들 맞아?ㅋㅋ 조인코래방 신경치매팀 라이브 모음집

좋은 에너지를 주는 것들 2022. 11. 7. 15:13
1
728x90
728x90