Talend Studio와 TAC를 이용한 ETL 데모
안녕하세요 씨앤텍시스템즈 김준형입니다. 이번 포스트는 Talend 기능에 대해서 정리해 보았습니다. Oralce의 테이블을 호출하고 ETL 기능을 수행하면서 Talend 기능을 살펴보겠습니다. Talend Studio의 실행환경은 윈도우에서 진행하였습니다. TAC(Talend Administrator Center)는 Linux 환경에 설치하고 윈도우에서 Web환경에서 진행했습니다. 먼저 Talend Studio 실행화면입니다. 여기서 Local
MYSQL 인덱스 튜닝
Spring Boot에서 MyBatis 적용
안녕하세요, 씨앤텍시스템즈 육지후 연구원입니다. 이번 포스트에서는 SpringBoot에서 MyBatis를 적용하는 방법에 대해 작성하려 합니다. ※ 사전에 Spring Boot가 설치되어 있어야 합니다. ※ ※ 해당 포스트는 Oracle을 사용하지만 다른 DB도 사용할 수 있습니다. ※ MyBatis Logo 1. MyBatis란? MyBatis는 간단하게 데이터베이스를 쉽게 다룰 수 있도록 도와주는 프레임워크입니다. 프로그램에 있는 SQL 쿼
Redhat 8.8 IBM DB2 11.5.8 서버 설치 (root)
안녕하세요, 씨앤텍시스템즈입니다. 이번 게시물은 Redhat 8.8 환경에 IBM DB2 서버 기본 설치에 대해 알아보겠습니다. 1. 사용환경 Remote Network Tool MobaXterm Virtual Machine Software Oracle VM VirtualBox OS Red Hat Enterprise Linux release 8.8 (0otpa) Memory 8192MB Processor 4 CPU 2. 설치파일 v11.5.8_
Redhat 8.8 IBM DB2 11.5.8 서버 사용자 설치 (non-root)
안녕하세요, 씨앤텍시스템즈입니다. 이번 게시물은 IBM DB2 사용자 설치(non-root) 방법에 대해 알아보겠습니다. ※ 실 사용 시 root 계정을 사용하지 못하는 경우가 빈번히 발생하므로 사용자 설치를 통해 이를 해결하기 위함입니다. IBM DB2 Logo 1. 사용환경 Remote Network Tool MobaXterm Virtual Machine Software Oracle VM VirtualBox OS Red Hat Enterpr
RDS MySQL IOPS 장애 대응기
버즈빌에서 AWS RDS MySQL 데이터베이스를 운영하는 중에 맞닥뜨린 메모리 문제와 그 해결 방법에 대해 소개하는 글입니다. 들어가며 안녕하세요, 버즈빌 엔지니어 Summer입니다. 현재 버즈빌 광고의 월평균 사용자는 2천만명 정도이고 버즈빌 서버로 한달간 약 70억건 정도의 광고 요청이 들어옵니다. 마이크로서비스로 쪼개져있는 서비스중 광고 요청을 보낸…
잃어버린 클레임 데이터를 찾아서
안녕하세요. 올리브영 온라인몰의 교환/반품을 책임지고 있는 CX…
신규 재고 시스템 구축을 위한 개발 여정
…
BULK 처리 Write에 집중해서 개선해보기
애플리케이션, DB 모두 행복한 BULK 처리
RDS 모니터링을 위한 나만의 CloudWatch Dashboard 만들기
‘우리 게임의 진성 유저는?’, Google BigqueryML 솔루션을 활용한 유저 분류 모델 개발
하루에도 수많은 유저가 게임에 접속한다. 각 유저는 게임 내에서 광고 시청, 게임 플레이, 결제 등 다양한 행동 패턴을 보이고, 이 패턴은 유저마다 다르다. 다양한 행동 패턴을 보이는 유저들에게 획일화된 마케팅 활동을 전개하는 것은 게임 운영 측면에서 비효율적일 수 있다. 따라서 유저의 행동 패턴을 기반으로 게임 유저를 분류하고, 분류된 유저별 개인화된 마케팅 활동을 전개하는 것이 중요하다. […]
AWS RDS 인증서 만료에 따른 인증서 업데이트
핑크퐁의 통합 데이터 환경 구축기 (feat. Snowflake)
MySQL online alter부터 CPU 100% 장애까지
쿠키런: 오븐브레이크 팀에서 MySQL을 사용하면서 있었던 사례에 대해 공유합니다
다나와의 상품 데이터 여정
다나와 상품 데이터 다나와에는 컴퓨터 부품부터 시작하여 옷, 가전, 가구 식품 등등 많은 다양한 상품들이 있습니다. 이 많은 상품 데이터들은 다나와에서는 어떻게 가지고 관리하고 있을까요? 데이터 흐름도 우선 데이터 흐름도를 보기 전에 일부 용어를 설명하고 가겠습니다. 기준 상품: 다나와에서 자체적으로 만든 상품입니다, 상품 클릭 시 링크 상품들이 모여있는 상세페이지로 이동합니다. 링크 상품: 기준 상품과 연결된 상품으로, 클릭 시 해당 제품의
MySQL과 SSL/TLS통한 접속
Redis Pub/Sub을 활용한 쿠폰 발급 비동기 처리
안녕하세요.️ 쿠폰스쿼드 백엔드 개발자 어푸입니다! 쿠폰 스쿼드에서는 올리브영을 방문하시는 많은 고객님이 안정적으로 쿠폰 서비스를 받으실 수 있도록 개선 작업을 진행하고 있습니다. 지난번 레이 님이 올리브영 쿠폰 발급 개선 이야기를 통해 Redis…
사용법과 함께 작성해본 좌충우돌 AWS DMS 사용기 - feat. RDS 통합 이야기
안녕하세요, 뱅크샐러드 Core Infra 팀의 DevOps Engineer 이재환 입니다. AWS DMS를 사용하면서 겪었던 경험들을 기반으로 기본적인 사용법에 대해 공유해보고자 합니다. RDS 비용 최적화 이야기 (서론) 요즘 비용 최적화에 다들 관심많으시죠? 저희 뱅크샐러드에서도…