엔라이즈 데이터 분석가의 A 부터 Z 까지
안녕하세요. 위피/콰트의 데이터 분석을 맡고 있는 신민용입니다. 이번에 소개해드릴 내용은 엔라이즈 데이터 분석가의 A to Z를 말씀드리려고 합니다. 데이터 분석가는 무슨 업무를 하는지, 어떻게 일을하고 있는지에 대해서 소개하겠습니다. 분석가의 업무 ß 결론부터 말씀드리면, 분석가의 업무에는 제약도 제한도 없습니다.
devBlog
Data Engineering 글 모음
기업 기술블로그의 Data Engineering 관련 글 347개
ETL 개념과 ETL 개발 시 고려해야 하는 원칙들
0. 시작하며 정답이 없다는 것은 참 어려운 것 같습니다. 마치 이 도입부를 쓰는 데에 제가 1시간 30분이 넘는 시간 동안 하얀색 화면을 보며 어떠한 말로 이 포스팅을 시작하면 좋을지 고민한 것처럼요. 본문은 쉽습니다. 제가 이 포스팅에서 쓰고자 한 내용을 전달하면 되니까요. 마무리 역시 모든 내용을 정리하며 끝마치는 내용을 적으면 되니 어려울 것도 없습니다. 그러나 도입부는 그러한 가이드라인이 없어서 어떻게 해야 잘 쓴 도입부일까 하는 고민
데이터베이스 관계
안녕하세요, 똑똑한개발자에서 백엔드 개발을 하고 있는 권창식입니다. 벌써 3번째 데이터베이스 이야기입니다.😃 오늘은 데이터베이스 관계의 개념에 대해 소개해드리고 자 합니다. 관계의 정의 관계는 개체와 개체 사이의 논리적인 연결을 의미합니다. 관계에는 개체 간의 관계와 속성 간의 관계가 있습니다. 관계의 형태 1:1(One To One) : 개체 집합 A의 각 원소가 개체 집합 B의 원소 한 개와 대응하는 관계입니다. 1:N(One To Man
유저들이 정말로 원하는 컨텐츠는 무엇일까? — 우리의 추천시스템의 시작 (2)
화해가 개인정보를 보호하는 방법 – 수집
화해가 개인정보를 보호하는 방법 화해팀은 정보보안 조직에서 전사적으로 현황을 파악하여 흩어져 관리되던 개인정보를 통합하여 관리하고 점검해나가고 있습니다. 또한, 개인정보 라이프사이클에 따른 단계별 보안 전략에 따라 법적 준거성 검토를 포함하여 안전한 관리방안을 마련하고 있습니다.
딥러닝으로 리뷰에서 제품 속성 정보 추출하기
딥러닝 만약 리뷰에 쓰인 제품 속성을 추출하고 주요한 속성정보만 사용자에게 제공하면 더 좋은 고객 경험을 만들 수 있지 않을까? 추출한 제품 속성을 정량화한다면 기존에는 알기 힘들었던 제품의 특징으로 볼 수 있지 않을까?
아니, SQL에서 R 쓸 수 있다니까요? 진짜로!!
유저들이 정말로 원하는 컨텐츠는 무엇일까? — 우리의 추천시스템의 시작 (1)
AI 기반 뉴스 3줄 요약 서비스 개발기
“기사를 단 3줄로 요약해주는 AI” 안녕하세요, 오늘은 줌인터넷이 연합뉴스와 공동 개발한 AI 기반 ‘뉴스 세 줄 요약’ 서비스에 대한 연구 내용을 소개드리려고 합니다. 해당 서비스는 기사 요약 AI 기술이 국내 언론에 최초로 도입된 사례로, 현재 연합뉴스 홈페이지에서 확인할 수 있는데요. 지금부터 해당 연구 내용의 소개와 학습 데이터 구축 과정을 중점적으로...
실시간 데이터 검증하기
마키나락스는 제조업에서 실시간으로 생산 장비와 공정의 고장 및 이상을 사전에 예측하는 이상탐지 시스템을 제공하고 있습니다. 이상탐지 시스템을 적용하고자 하는 제조 생산 현장은 제품 및 공정의 변화가 잦은 곳이 많습니다. 공정이 변하면 데이터 분포가 달라지기 때문에, 사전에 학습된 모델이 적용하려는 시점에는 정상 작동하기 어렵습니다. 이런 문제를 해결하기 위해 학습과 추론이 동시에 가능한 코드 형태로 모델을 배포하고, 배포된 동안 새롭게 수집한
아이템에 대한 만족도는 플레이어가 게임을 열심히 하는데 영향을 미칠까??
들어가며 앞선 포스팅에서는 저희 회사 게임을 대상으로 좋은 아이템(영웅/전설 등급 전직 아이템)이 유저의 게임 플레이에 영향을 미치는지 인과 분석한 내용을 소개해 드렸습니다.(게임 플레이어는 좋은 아이템을 획득하면 게임을 더 열심히 하게 될까?). 접속 일수, 결제 금액 등 아이템 획득 전후 30일(단기간) 간 게임 플레이 활동의 변화값을 보았을 때 전반적으로 좋은 아이템을 획득한 사건이 플레이 활동 증대에 영향을 미친다는 결과가 나왔습니다.
bayesian optimization in trading
AI는 인공신경망의 등장부터 두 번의 AI 겨울이 지난 현재까지 많은 산업의 패러다임을 바꿔나가고 있습니다. 특히 금융시장에서는 AI의 잠재력을 높게 평가하고, 현재 시장 트렌드 분석, 미래 시장 변화 예측 등을 위한 최적의 예측 모델을 연구하고 있는데요. 이같은 모델 개발을 위해서는 먼저 ‘초매개변수(하이퍼 파라미터, hyperparameter)’를 설정해야 합니다. 많은 연구들을 통해 알 수...
Transformer를 이용해 대량의 게임 데이터를 임베딩 해보자!
Introduction NCSOFT Data Center에는 대량의 로그 데이터가 쌓여있습니다. 이를 활용해 Data Center의 분석가들은 다양한 주제의 분석 목표를 설정하고 인사이트를 도출하고 모델을 생성합니다. 이렇게 진행되고 있는 프로젝트들의 대부분은 다양한 종류의 로그 데이터 중 유저 행동 로그를 사용하여 주로 진행됩니다. 그렇다면, 많은 분석가들이 사용하는 유저 행동 로그 데이터를 그 특징과 정보를 잘 함축시킬 수 있게 임베딩 해
AI를 활용한 고용률 예측 모델 개발기(2)
안녕하세요, AI PLUS Tech Blog입니다. 오늘은 지난달 소개드린 고용률 예측 모델의 개발 과정을 이어 설명드리려고 합니다. 지난 1편에서는 뉴스 기사로부터 고용 시장에 대한 감정 정보(긍정/부정/보통)를 추출하는 부분을 다뤘는데요. 오늘은 이렇게 추출된 감정 정보로부터 미래 고용률을 현재 예보(nowcasting)하는 과정에 대해 중점적으로 살펴보려고 합니다. 본격적인 개발 과정을 소개하기 앞서, 1편을 못 보신...
[디파이 시리즈] #1 디파이 생태계
엔라이즈의 실험 방법론을 소개합니다
안녕하세요. 위피/콰트의 데이터 분석을 맡고 있는 신민용입니다. 오늘 소개해드릴 내용은 저희 제품팀이 어떻게 실험을 하고 있으며, 어떤 방법론을 활용하여 진행하고 있는지에 대해서 소개해드린 후 앞으로의 방향도 짧게 다뤄보겠습니다. 본격적인 소개에 앞서 저희의 전체 실험 플로우를 나타내는 그래프입니다.
‘가짜뉴스를 찾아라!’ 가짜뉴스 판별 특허 알아보기
안녕하세요, AI PLUS Tech Blog입니다. 오늘은 줌인터넷에서 등록한 가짜뉴스 관련 특허에 대해 간단히 소개드리려고 합니다. 1. 가짜뉴스란? 먼저 특허 내용을 소개하기 앞서, 특허가 나오게 된 배경인 ‘가짜뉴스’에 대해 알아보겠습니다. ‘가짜뉴스’라고 하면 어떤 뉴스가 떠오르시나요? 아마 아래 <그림1>과 같이 거짓으로 꾸며진 뉴스를 생각하실 것 같은데요! 그림1. 흔히 생각되는 가짜뉴스 예시 이러한...