Database 기술 블로그 글 모음 (11페이지)

안녕하세요 Data Product 팀 박상우입니다. 이번에 제가 소개해드릴 내용은 팀 내 session Info data 적재 및 API 서비스 구축에 적용한 Redis Stream에 대한 이야기입니다. 저희 팀에서는 User의 행동 정보를 수집하는 프레임워크 중 하나인 montelena receiver를 통해 수집한 데이터 (view, event, impression 등)를 post Processor라는 데이터 파이프라인 application을 통해 적재, 가공해서 각종 지표 트래킹 및 분석에 활용할 수 있도록 제공하고 있습니다. 그중 유니크한 active user를 식별하기 위해 session_id를 발급하고, 그 히스토리를 남겨 광고에 활용하고 있는데,'Big Smile Day' (지마켓 최고의 ..

Backend Database Tools

롯데온

2024-07-11

RDS Proxy!! Maxscale 오픈소스 전환

Backend Database Infra

카카오페이

2024-07-10

마이데이터 플랫폼의 대용량 데이터 처리 개선! 구경 한번 해볼래?

마이데이터 플랫폼의 대용량 처리 개선 경험을 공유합니다!

Backend Database Infra

지마켓

2024-06-30

신규 서비스 "꿀템"을 만들기 위한 여정(네? 다음달까지요?) -2편

안녕하세요. Web Frontend팀 이민하입니다. 지난 편에서 꿀템 서비스를 기획하고 필요한 개념들의 이름을 지어주며 이를 바탕으로 데이터베이스를 설계해 보았습니다. 이번 편에서는 어떤 기술 스택을 선택했는지 소개하도록 하겠습니다. 기술 스택 선택과 개발 External 망에는 기존에 BSD 프론트엔드 영역 어플리케이션들이 있습니다. node.js와 경량 웹프레임워크인 fastify로 되어있습니다. 프론트에서 api를 호출하면 attraction 집계 어플리케이션이 메인 데이터 저장소인 Oracle DB에서 데이터를 조회해 옵니다. 구매내역, 링크루 등 외부 api를 호출한 결과도 전달해 줍니다. 저장된 데이터는 Admin화면을 통해 관리할 수 있습니다. 누가 어떤 피드를 작성했고 누가 좋아요 버튼을 ..

Backend Database Frontend Tools

지마켓

2024-06-28

조회 속도 개선하기 (ESM '문의하기' 기능 개편)

안녕하세요.Seller & SD Engineering팀의 김민우입니다. 이번 글은 ESM(지마켓 판매자 사이트) 개편 중 '문의하기' 개발을 맡으며 겪었던 어려움과 이를 해결해 나가는 몇 가지 방법들을 소개하고자 합니다. 제가 개발 맡은 부분은 판매자에게 구매자의 문의내용을 담당하는 '게시판 문의', 그리고 CS(고객센터)에서 주는 '긴급 메시지'를 통합하여 지마켓과 옥션 두 사이트에 대해 각각 보여주는 통합 페이지를 개편시키는 일이었습니다. 각설하고 조회 성능을 올린 결과물부터 영상으로 보시죠. 영상에서 보셨듯이, 대형 셀러의 경우 한 페이지를 로드하는 데 기본 몇십 초가 걸립니다. 페이지를 넘길 때조차 마찬가지입니다. 상품이 많아질수록 문의도 증가하기 마련인데, 모든 문의에 일일이 답변하기는 어..

Backend Database DevOps

카카오페이

2024-06-25

Google Cloud Next 2024 참관 후기 3편 - Generative AI with Enterprise Data

기업이 가진 데이터로 가치를 창출하는 과정은 중요하지만 어렵습니다. Generative AI의 도움을 받으면 어떨까요?

AI/ML Backend Database

마켓컬리

2024-06-13

데이터가 있었는데요, 아니 없어요

COMMIT, MVCC 그리고 SET AUTOCOMMIT

Backend Database Tools

마켓컬리

2024-06-13

데이터가 있었는데요, 아니 없어요

COMMIT, MVCC 그리고 SET AUTOCOMMIT

Backend Database Performance

카카오페이

2024-06-11

R2DBC Connection Pool 실종 사건

Spring Boot 애플리케이션 시작 시 R2DBC Connection Pool이 초기화되지 않는 원인과 해결 방법, 그리고 IntelliJ가 문제 해결에 미친 영향에 대해 소개합니다.

Backend Database Tools

11번가

2024-06-06

전시 딜 내재화 프로젝트 회고: MongoDB 기반 데이터 구축과 API 개선 과정

안녕하세요, 11번가 전시서비스개발팀의 서장원입니다. 전시 딜 내재화 업무를 맡아 진행했던 과정과 개선 작업이 갖는 의미에 대한 개인적인 회고를 공유해 보고자 합니다. 내용 이해를 돕기위해, 기초적인 질문을 던져봅니다. 출처: https://chimhaha.net/story/111311 ‘딜’ 그리고 ‘내재화’ 라는게 무슨 뜻인가요? 딜은 상품 판매를 위한 판촉행사라고 생각하면 쉽습니다. 예를 들어, 단 10일간! 사과 한 박스에 단돈 3만원!

Backend Data Engineering Database

글루시스

2024-06-03

LVM 스냅샷 관리 기능 개발 후기 (1)

장애 복구나 유실된 데이터 복원을 위해서 AnyStor는 이전부터 스냅샷 기능을 지원하였습니다. 그러나 스냅샷 생성과 확인은 가능할 뿐, 실제로 복원 등에 사용하기 위해서는 관리자가 CLI 명령어를 사용하여 데이터를 복원할 수밖에 없었습니다. 실제 복원 시에는 고객 서비스에 영향이 없도록 진행되어야 했기에 도입하기 까다로웠던 점도 있었습니다. 이번에 스냅샷 기능을 재편하게 되었는데, 스냅샷을 안정적으로 도입하기 위해서 거쳤던 테스트와 이슈 대응

Backend Database DevOps Testing Tools

매스프레소

2024-05-20

Aurora/RDS 전문가의 GCP Cloud SQL이전기

AWS Database Infra

스포카

2024-05-03

Querydsl에서 Kotlin JDSL 으로

안녕하세요. 또다시 전환 이야기로 찾아온 스포카 백엔드팀 프로그래머 남경호입니다. (이번에는 제목을 다르게 지어봤어요.) 최근 저희 백엔드팀에서는 Querydsl을 Kotlin JDSL로 전환하는 작업을 진행하였는데요. Querydsl은 Spring Framework를 사용하고 계신다면 누구나 알고 계실 유명한 쿼리 빌더 라이브러리입니다. 한편 Kotlin JDSL은 2021년 라인에서 공개한 쿼리빌더 라이브러리입니다. 저희가 이렇게 유명한 라

Backend Database Kotlin Spring Tools

메가존클라우드

2024-04-25

Snowflake Arctic의 기술적 진보

AWS Data Engineering Database

올리브영

2024-03-11

상품데이터 Pipeline을 위한 Debezium MSK Connect

안녕하세요! 상품스쿼드 백엔드 개발자 빽곰입니다. 상품스쿼드에서 상품데이터 Pipeline을 위해 도입한 Debezium CDC…

Backend Database DevOps