Deploying to master from @ 0d07d3d 🚀

feed.xml

@@ -1,4 +1,4 @@
-<?xml version="1.0" encoding="UTF-8"?><rss xmlns:dc="http://purl.org/dc/elements/1.1/" xmlns:content="http://purl.org/rss/1.0/modules/content/" xmlns:atom="http://www.w3.org/2005/Atom" version="2.0"><channel><title><![CDATA[Swalloow Blog]]></title><description><![CDATA[Personal Blog. About Data Science, Data Engineering]]></description><link>https://swalloow.github.io</link><generator>GatsbyJS</generator><lastBuildDate>Sat, 23 Dec 2023 06:37:32 GMT</lastBuildDate><item><title><![CDATA[Spark on Kubernetes: 커스텀 스케줄러 (2)]]></title><description><![CDATA[Spark 3.4 버전부터 Customized K8S Scheduler 기능이 GA…]]></description><link>https://swalloow.github.io/spark-on-kubernetes-scheduler-2</link><guid isPermaLink="false">https://swalloow.github.io/spark-on-kubernetes-scheduler-2</guid><pubDate>Sun, 10 Dec 2023 00:00:00 GMT</pubDate></item><item><title><![CDATA[Spark on Kubernetes: 커스텀 스케줄러 (1)]]></title><description><![CDATA[Spark 3.4 버전부터 Customized K8S Scheduler 기능이 GA…]]></description><link>https://swalloow.github.io/spark-on-kubernetes-scheduler</link><guid isPermaLink="false">https://swalloow.github.io/spark-on-kubernetes-scheduler</guid><pubDate>Thu, 08 Jun 2023 00:00:00 GMT</pubDate></item><item><title><![CDATA[베를린에서 2개월 살아남기]]></title><description><![CDATA[우연히 회사에서 좋은 기회를 얻게 되어 독일에서…]]></description><link>https://swalloow.github.io/berlin</link><guid isPermaLink="false">https://swalloow.github.io/berlin</guid><pubDate>Wed, 10 May 2023 00:00:00 GMT</pubDate></item><item><title><![CDATA[MLOps 관련 책, 강의 리뷰 (DMLS, FSDL)]]></title><description><![CDATA[MLOps…]]></description><link>https://swalloow.github.io/mlops-dmls-fsdl</link><guid isPermaLink="false">https://swalloow.github.io/mlops-dmls-fsdl</guid><pubDate>Tue, 13 Sep 2022 00:00:00 GMT</pubDate></item><item><title><![CDATA[Spark on Kubernetes: 스팟 인스턴스 사용을 위한 기능들]]></title><description><![CDATA[스팟 인스턴스 유형을 사용하면 온디맨드에 비해 70~9…]]></description><link>https://swalloow.github.io/spark-on-kubernetes-spot-instance</link><guid isPermaLink="false">https://swalloow.github.io/spark-on-kubernetes-spot-instance</guid><pubDate>Sat, 23 Jul 2022 00:00:00 GMT</pubDate></item><item><title><![CDATA[쿠버네티스에서 GPU 리소스를 효율적으로 활용하는 방법]]></title><description><![CDATA[GPU는 강력한 연산 기능을 제공하지만 비용이 많이 들기 때문에 제한된 리소스를 효율적으로 활용하는 것이 중요합니다. 이번 글에서는 NVIDIA…]]></description><link>https://swalloow.github.io/gpu-utilization</link><guid isPermaLink="false">https://swalloow.github.io/gpu-utilization</guid><pubDate>Fri, 08 Jul 2022 00:00:00 GMT</pubDate></item><item><title><![CDATA[Airflow worker에 KEDA AutoScaler 적용한 후기]]></title><description><![CDATA[Airflow…]]></description><link>https://swalloow.github.io/airflow-worker-keda-autoscaler</link><guid isPermaLink="false">https://swalloow.github.io/airflow-worker-keda-autoscaler</guid><pubDate>Fri, 24 Jun 2022 00:00:00 GMT</pubDate></item><item><title><![CDATA[컨테이너 환경을 위한 초기화 시스템 (tini, dumb-init)]]></title><description><![CDATA[쿠버네티스 기반의 데이터플랫폼을 운영하다보면 이미지의 에 , 과 같은 명령어를 사용하는 경우가 많습니다. 예를 들어 Airflow에서는 dumb…]]></description><link>https://swalloow.github.io/container-tini-dumb-init</link><guid isPermaLink="false">https://swalloow.github.io/container-tini-dumb-init</guid><pubDate>Fri, 27 May 2022 00:00:00 GMT</pubDate></item><item><title><![CDATA[EKS Karpenter를 활용한 Groupless AutoScaling]]></title><description><![CDATA[21년 12월 EKS에서 새로운 쿠버네티스 클러스터 오토스케일러인 Karpenter…]]></description><link>https://swalloow.github.io/eks-karpenter-groupless-autoscaling</link><guid isPermaLink="false">https://swalloow.github.io/eks-karpenter-groupless-autoscaling</guid><pubDate>Fri, 13 May 2022 00:00:00 GMT</pubDate></item><item><title><![CDATA[개발자가 의사결정을 기록하는 방법 (feat. ADR)]]></title><description><![CDATA[…]]></description><link>https://swalloow.github.io/feat-adr</link><guid isPermaLink="false">https://swalloow.github.io/feat-adr</guid><pubDate>Sat, 04 Dec 2021 00:00:00 GMT</pubDate></item><item><title><![CDATA[JupyterHub on Kubernetes]]></title><description><![CDATA[일반적으로 JupyterHub를 Kubernetes 환경에 배포할 때 Helm Chart를 많이 사용합니다.
+<?xml version="1.0" encoding="UTF-8"?><rss xmlns:dc="http://purl.org/dc/elements/1.1/" xmlns:content="http://purl.org/rss/1.0/modules/content/" xmlns:atom="http://www.w3.org/2005/Atom" version="2.0"><channel><title><![CDATA[Swalloow Blog]]></title><description><![CDATA[Personal Blog. About Data Science, Data Engineering]]></description><link>https://swalloow.github.io</link><generator>GatsbyJS</generator><lastBuildDate>Sun, 24 Dec 2023 07:21:04 GMT</lastBuildDate><item><title><![CDATA[Pandas 2.0의 Copy-on-Write에 대하여]]></title><description><![CDATA[Pandas 2.0 버전부터 가 추가되었으며 3.0 버전부터 기본 활성화로 변경될 예정입니다. 이번 글에서는 Pandas Copy-on…]]></description><link>https://swalloow.github.io/pandas-2-0-copy-on-write</link><guid isPermaLink="false">https://swalloow.github.io/pandas-2-0-copy-on-write</guid><pubDate>Sun, 24 Dec 2023 00:00:00 GMT</pubDate></item><item><title><![CDATA[Spark on Kubernetes: 커스텀 스케줄러 (2)]]></title><description><![CDATA[Spark 3.4 버전부터 Customized K8S Scheduler 기능이 GA…]]></description><link>https://swalloow.github.io/spark-on-kubernetes-scheduler-2</link><guid isPermaLink="false">https://swalloow.github.io/spark-on-kubernetes-scheduler-2</guid><pubDate>Sun, 10 Dec 2023 00:00:00 GMT</pubDate></item><item><title><![CDATA[Spark on Kubernetes: 커스텀 스케줄러 (1)]]></title><description><![CDATA[Spark 3.4 버전부터 Customized K8S Scheduler 기능이 GA…]]></description><link>https://swalloow.github.io/spark-on-kubernetes-scheduler</link><guid isPermaLink="false">https://swalloow.github.io/spark-on-kubernetes-scheduler</guid><pubDate>Thu, 08 Jun 2023 00:00:00 GMT</pubDate></item><item><title><![CDATA[베를린에서 2개월 살아남기]]></title><description><![CDATA[우연히 회사에서 좋은 기회를 얻게 되어 독일에서…]]></description><link>https://swalloow.github.io/berlin</link><guid isPermaLink="false">https://swalloow.github.io/berlin</guid><pubDate>Wed, 10 May 2023 00:00:00 GMT</pubDate></item><item><title><![CDATA[MLOps 관련 책, 강의 리뷰 (DMLS, FSDL)]]></title><description><![CDATA[MLOps…]]></description><link>https://swalloow.github.io/mlops-dmls-fsdl</link><guid isPermaLink="false">https://swalloow.github.io/mlops-dmls-fsdl</guid><pubDate>Tue, 13 Sep 2022 00:00:00 GMT</pubDate></item><item><title><![CDATA[Spark on Kubernetes: 스팟 인스턴스 사용을 위한 기능들]]></title><description><![CDATA[스팟 인스턴스 유형을 사용하면 온디맨드에 비해 70~9…]]></description><link>https://swalloow.github.io/spark-on-kubernetes-spot-instance</link><guid isPermaLink="false">https://swalloow.github.io/spark-on-kubernetes-spot-instance</guid><pubDate>Sat, 23 Jul 2022 00:00:00 GMT</pubDate></item><item><title><![CDATA[쿠버네티스에서 GPU 리소스를 효율적으로 활용하는 방법]]></title><description><![CDATA[GPU는 강력한 연산 기능을 제공하지만 비용이 많이 들기 때문에 제한된 리소스를 효율적으로 활용하는 것이 중요합니다. 이번 글에서는 NVIDIA…]]></description><link>https://swalloow.github.io/gpu-utilization</link><guid isPermaLink="false">https://swalloow.github.io/gpu-utilization</guid><pubDate>Fri, 08 Jul 2022 00:00:00 GMT</pubDate></item><item><title><![CDATA[Airflow worker에 KEDA AutoScaler 적용한 후기]]></title><description><![CDATA[Airflow…]]></description><link>https://swalloow.github.io/airflow-worker-keda-autoscaler</link><guid isPermaLink="false">https://swalloow.github.io/airflow-worker-keda-autoscaler</guid><pubDate>Fri, 24 Jun 2022 00:00:00 GMT</pubDate></item><item><title><![CDATA[컨테이너 환경을 위한 초기화 시스템 (tini, dumb-init)]]></title><description><![CDATA[쿠버네티스 기반의 데이터플랫폼을 운영하다보면 이미지의 에 , 과 같은 명령어를 사용하는 경우가 많습니다. 예를 들어 Airflow에서는 dumb…]]></description><link>https://swalloow.github.io/container-tini-dumb-init</link><guid isPermaLink="false">https://swalloow.github.io/container-tini-dumb-init</guid><pubDate>Fri, 27 May 2022 00:00:00 GMT</pubDate></item><item><title><![CDATA[EKS Karpenter를 활용한 Groupless AutoScaling]]></title><description><![CDATA[21년 12월 EKS에서 새로운 쿠버네티스 클러스터 오토스케일러인 Karpenter…]]></description><link>https://swalloow.github.io/eks-karpenter-groupless-autoscaling</link><guid isPermaLink="false">https://swalloow.github.io/eks-karpenter-groupless-autoscaling</guid><pubDate>Fri, 13 May 2022 00:00:00 GMT</pubDate></item><item><title><![CDATA[개발자가 의사결정을 기록하는 방법 (feat. ADR)]]></title><description><![CDATA[…]]></description><link>https://swalloow.github.io/feat-adr</link><guid isPermaLink="false">https://swalloow.github.io/feat-adr</guid><pubDate>Sat, 04 Dec 2021 00:00:00 GMT</pubDate></item><item><title><![CDATA[JupyterHub on Kubernetes]]></title><description><![CDATA[일반적으로 JupyterHub를 Kubernetes 환경에 배포할 때 Helm Chart를 많이 사용합니다.
 이 글에서는 zero-to…]]></description><link>https://swalloow.github.io/jupyterhub-on-kubernetes</link><guid isPermaLink="false">https://swalloow.github.io/jupyterhub-on-kubernetes</guid><pubDate>Sat, 23 Oct 2021 00:00:00 GMT</pubDate></item><item><title><![CDATA[JupyterHub에 Tensorboard 연동하기]]></title><description><![CDATA[이 글에서는 JupyterHub 사용자 환경에 tensorboard를 proxy…]]></description><link>https://swalloow.github.io/jupyterhub-tensorboard</link><guid isPermaLink="false">https://swalloow.github.io/jupyterhub-tensorboard</guid><pubDate>Sat, 23 Oct 2021 00:00:00 GMT</pubDate></item><item><title><![CDATA[Data Mesh 아키텍쳐의 네 가지 원칙]]></title><description><![CDATA[이 글은 martinfowler.com의 Data Mesh Principles and Logical Architecture…]]></description><link>https://swalloow.github.io/data-mesh-principle</link><guid isPermaLink="false">https://swalloow.github.io/data-mesh-principle</guid><pubDate>Sat, 25 Sep 2021 00:00:00 GMT</pubDate></item><item><title><![CDATA[Spark on Kubernetes: 성능 최적화 방법들]]></title><description><![CDATA[Spark 3.1 버전부터 Spark on Kubernetes가 GA로 변경되었습니다.
 이 글에서는 Spark on YARN…]]></description><link>https://swalloow.github.io/spark-on-kubernetes-perf</link><guid isPermaLink="false">https://swalloow.github.io/spark-on-kubernetes-perf</guid><pubDate>Sat, 11 Sep 2021 00:00:00 GMT</pubDate></item><item><title><![CDATA[여러 조직이 함께 사용하는 Airflow 만들기]]></title><description><![CDATA[…]]></description><link>https://swalloow.github.io/airflow-multi-tenent-1</link><guid isPermaLink="false">https://swalloow.github.io/airflow-multi-tenent-1</guid><pubDate>Sun, 15 Aug 2021 00:00:00 GMT</pubDate></item><item><title><![CDATA[사이드카 컨테이너로 Airflow 기능 확장하기]]></title><description><![CDATA[Airflow 2.1 버전부터 공식 Helm Chart…]]></description><link>https://swalloow.github.io/airflow-sidecar</link><guid isPermaLink="false">https://swalloow.github.io/airflow-sidecar</guid><pubDate>Sun, 01 Aug 2021 00:00:00 GMT</pubDate></item><item><title><![CDATA[Airflow on Kubernetes (3)]]></title><description><![CDATA[최근 Airflow에는 Kubernetes 지원을 위해 다양한 컴포넌트들이 추가되고 있습니다. 이러한 변화의 흐름에 따라 Airflow…]]></description><link>https://swalloow.github.io/airflow-on-kubernetes-3</link><guid isPermaLink="false">https://swalloow.github.io/airflow-on-kubernetes-3</guid><pubDate>Fri, 05 Feb 2021 00:00:00 GMT</pubDate></item><item><title><![CDATA[Airflow on Kubernetes (2)]]></title><description><![CDATA[최근 Airflow에는 Kubernetes 지원을 위해 다양한 컴포넌트들이 추가되고 있습니다. 이러한 변화의 흐름에 따라 Airflow…]]></description><link>https://swalloow.github.io/airflow-on-kubernetes-2</link><guid isPermaLink="false">https://swalloow.github.io/airflow-on-kubernetes-2</guid><pubDate>Sun, 12 Jul 2020 00:00:00 GMT</pubDate></item><item><title><![CDATA[K8S 클러스터 초기 설정을 위한 Helm Chart 만들기]]></title><description><![CDATA[K8S 클러스터를 설정하고 운영하다보면 버전 업데이트, 컴포넌트 추가 설치 등 다양한 변경에 대응할 수 있어야 합니다. 또한 Develop…]]></description><link>https://swalloow.github.io/umbrella-helm-chart</link><guid isPermaLink="false">https://swalloow.github.io/umbrella-helm-chart</guid><pubDate>Sat, 20 Jun 2020 00:00:00 GMT</pubDate></item><item><title><![CDATA[Airflow on Kubernetes (1)]]></title><description><![CDATA[최근 Airflow에는 Kubernetes 지원을 위해 다양한 컴포넌트들이 추가되고 있습니다. 이러한 변화의 흐름에 따라 Airflow…]]></description><link>https://swalloow.github.io/airflow-on-kubernetes-1</link><guid isPermaLink="false">https://swalloow.github.io/airflow-on-kubernetes-1</guid><pubDate>Fri, 05 Jun 2020 00:00:00 GMT</pubDate></item><item><title><![CDATA[Gatsby와 Contentful로 블로그 이전한 후기]]></title><description><![CDATA[3년 정도 이어왔던 Jekyll 블로그를 Gatsby와 Contentful…]]></description><link>https://swalloow.github.io/gatsby-contentful</link><guid isPermaLink="false">https://swalloow.github.io/gatsby-contentful</guid><pubDate>Sat, 25 Apr 2020 00:00:00 GMT</pubDate></item><item><title><![CDATA[EKS 클러스터에 VPC CIDR 추가하기]]></title><description><![CDATA[앞서 정리했던 EKS의 VPC…]]></description><link>https://swalloow.github.io/eks-cidr</link><guid isPermaLink="false">https://swalloow.github.io/eks-cidr</guid><pubDate>Sat, 14 Mar 2020 00:00:00 GMT</pubDate></item><item><title><![CDATA[AWS Solutions Architect Associate 취득 후기]]></title><description><![CDATA[그동안 관심은 있었지만 굳이 내 돈주고 시험볼 생각이 없었기에 미루고 있다가
 12월까지 취득하면 5…]]></description><link>https://swalloow.github.io/aws-cert</link><guid isPermaLink="false">https://swalloow.github.io/aws-cert</guid><pubDate>Sat, 30 Nov 2019 00:00:00 GMT</pubDate></item><item><title><![CDATA[EKS의 AutoScaling 이해하기]]></title><description><![CDATA[오늘은 Kubernetes의 Cluster AutoScaling에 대해 정리해보려 합니다.