![[DAN25] 기술세션 영상이 모두 공개되었습니다.](/_next/image?url=%2Fimages%2Fcompanies%2Fline.png&w=3840&q=75)
external
[DAN25] 기술세션 영상이 모두 공개되었습니다.
지난 11월 6일, 7일 양일간 진행된 팀네이버 컨퍼런스 DAN25에서는 네이버의 기술뿐만 아니라 크리에이티브, 서비스와 비즈니스를 유기적으로 융합해 일상의 작은 변화부터 새로운 생태계로의 도약까지, 끝없이 확장되는 경험의 로드맵을 함께 나누는 자리로 진행되었습니다. 현장에서는 AI 에이전트, 소버린 AI, AX 등 네이버가 제시하는 미래 전략과 실...
Naver D2|Naver D2 Team
2025.11.28
external
@RequestCache: HTTP 요청 범위 캐싱을 위한 커스텀 애너테이션 개발기
웹 애플리케이션을 개발하다 보면 하나의 HTTP 요청 내에서 동일한 외부 API를 여러 번 호출하거나 동일한 연산을 반복하는 경우가 종종 발생합니다. 이러한 중복 호출은 응답 시간을 증가시키고 불필요한 네트워크 오버헤드를 유발합니다. 이 글에서는 이러한 문제를 해결하기 위해 개발한 @RequestCache라는 커스텀 애너테이션의 개발 과정과 그 과정...
Naver D2|Naver D2 Team
2025.11.26
external
장시간 비동기 작업, Kafka 대신 RDB 기반 Task Queue로 해결하기
전자계약서 시스템에서는 다양한 업무 목적에 따라 여러 형태의 대용량 엑셀 파일을 생성할 수 있습니다. 예를 들어 생산성 지표 엑셀, 근무 관리 엑셀, 행정 처분 추정 업주 엑셀, 계약현황 엑셀 등 각기 다른 조건과 데이터로 구성된 엑셀을 이메일로 받아볼 수 있는 기능인데요. 데이터 조건에 따라 엑셀 생성 시간이 오래 걸려, 화면에서 결과를 기다리지 않게 K...
Woowahan Brothers|박민규
2025.11.25
external
서비스 조직에서 Kafka를 사용할 때 알아 두어야 할 것들 (5)
네이버 사내 기술 교류 행사인 NAVER ENGINEERING DAY 2025(10월)에서 발표되었던 세션을 공개합니다. 발표 내용 Consumer Group Protocol v2를 소개합니다. 발표 대상 조직에서 Kafka를 사용하거나 관심 있는 분들 Consumer Group Pro...
Naver D2|Naver D2 Team
2025.11.20
external
6개월 만에 연간 수십조를 처리하는 DB CDC 복제 도구 무중단/무장애 교체하기
네이버페이 차세대 아키텍처 개편을 위한 Plasma 프로젝트가 7년의 기간 끝에 2025년 7월부로 공식 종료를 선언했습니다. 이 글에서는 Plasma 프로젝트의 최종장인 DB CDC 복제 도구 ergate 프로젝트의 개발 및 전환 경험을 공유하고자 합니다. ergate 프로젝트 소개 ergate 프로젝트는 네이버페이 주문에서 DB 간 복제를...
Naver D2|Naver D2 Team
2025.11.18
external
이제 Redis를 멈춰보겠습니다: @CacheEvict 파헤치기
0. 프로젝트 환경 Spring Boot 3.3.7 Spring Data Redis 3.3.7 Lettuce 6.3.2 ㅤ 1. 개요 운영 환경에서 캐시를 다루다 보면 한 번쯤은 @CacheEvict(allEntries = true) 설정을 써볼까 고민하게 됩니다. 테스트에서 잘 동작하던 코드가, 서비스에서는 지연이나 장애로 이어지는 경우가 간혹 발생합니다...
Woowahan Brothers|신익수
2025.11.04
external
토스증권의 수 천개 실시간 데이터 파이프라인 운영방법 #2: MSA 환경 Observability 높이기
Kafka Broker request log를 활용해서 서비스 간 의존성 파악하기...
Toss|Toss Team
2025.09.19
external
JuiceFS: 오브젝트 스토리지를 활용하는 HDFS 호환 분산 파일 시스템
네이버에서는 다양한 서비스를 위해 공용 Hadoop 클러스터를 운영하고 있으며, Spark, Hive, MapReduce 등의 Hadoop 애플리케이션에서 처리한 데이터는 HDFS에 저장됩니다. HDFS는 Hadoop 에코시스템에서 데이터 로컬리티(data locality)를 지원해 높은 성능을 제공하며 내결함성과 확장성 측면에서도 우수하다는 장점이 있습니...
Naver D2|Naver D2 Team
2025.09.15
external
AI 실시간 추천 시스템을 위한 Flink 기반 스트림 조인 서비스 구축기
안녕하세요. Matching Dev Team의 Milo입니다. Azar는 전 세계 유저들을 24/7 연결하고 있으며, 즐거운 연결 경험을 제공하기 위해 세션 기반 추천 시스템1을 운영하고 있습니다. 이 추천 시스템은 유저의 행동이나 선호도 같은 정보를 바탕으로 맞춤형 추천을 제공하는 방식입니다. 추천 품질을 높이려면 유저의 최신 정보를 실시간 반영하는 것이...
Hyperconnect|Hyperconnect Team
2025.06.11
external
Kafka Connect로 DB 데이터 쉽게 연동하기
Kafka Connect와 JDBC 커넥터를 이용해 DB 데이터를 쉽게 Kafka로 전송하는 방법과 발생 가능한 문제를 해결하는 방법을 공유합니다....
Kurly|Kurly Team
2025.03.03
external
로그 파이프라인 개선기 - 기존 파이프라인 문제 정의 및 해결 방안 적용
1. 들어가며 안녕하세요. 쏘카 데이터엔지니어링팀 삐약, 루디입니다. 내용을 시작하기에 앞서, 저희 팀의 업무와 역할에 대해 간략히 소개해 드리겠습니다. 데이터엔지니어링팀은 신뢰할 수 있는 데이터를 쏘카 구성원들이 안정적으로 활용할 수 있도록 기반을 마련하고, 이를 실제 비즈니스에 적용할 수 있는 서비스를 개발하며 환경을 구축하고 있습니다. 데이터 마트 관...
Socar|Socar Team
2025.02.25
external
Flink SQL 도입기
안녕하세요. Azar Matching Dev Team 의 Zeze 입니다. Flink 는 대다수의 백엔드 엔지니어들에게 친숙한 기술은 아니지만, 이벤트 스트리밍 처리를 위한 대표적인 기술 중 하나입니다. 대규모 실시간 데이터 스트리밍 처리를 위해 분산 환경에서 빠르고 유연하게 동작하는 오픈소스 데이터 처리 엔진이며, 팀 내에서는 Azar 의 핵심 로직인 ...
Hyperconnect|Hyperconnect Team
2025.02.18
external
Spring Transactional Rollback Deep Dive
안녕하세요. Azar API Dev Team의 Ledger입니다. 이번 글에서는 Spring Transactional 동작에서 Checked Exception과 Unchecked Exception의 롤백(rollback) 처리에 관한 내용을 다뤄보겠습니다. 여러 사례를 통해 예외 처리 코드를 작성해 보고, 자주 혼동되는 부분들을 정리해 보았습니다. 그래서 ...
Hyperconnect|Hyperconnect Team
2025.02.10
external
분산 시스템 환경에서 Kafka Consumer 오프셋 이동하기
Spring Kafka 활용한 오프셋 이동 및 메시지 재처리 방법...
Kurly|Kurly Team
2024.12.02
external
장애 모의 훈련 그리고 배운 점
안녕하세요, SRE팀의 Ken.K입니다. Hyperconnect는 2024년에 접어들면서, 일부 국가의 사용자들에게 체감될 수 있는 장애부터 로그인 실패 같은 심각한 장애까지 여러 번의 대형 사고를 겪었습니다. 사실, 마이크로서비스 단위의 문제는 서비스 운영 중에 자주 발생하는 것이며, 각 프로덕트 팀의 온콜 대응 숙련도가 이미 높기 때문에 잘 대처하고 있...
Hyperconnect|Hyperconnect Team
2024.11.12
external
아자르 Data Lifecycle Policy 개발하기
안녕하세요. Azar API Dev Team의 Ledger 입니다. 아자르는 유럽, 아시아, 중동 등 다양한 지역에서 사랑받고 있는 글로벌 서비스 입니다. 글로벌 서비스를 운영하기 위해서는 고려해야 할 것이 많은데 그 중 유저 데이터의 라이프 사이클에 대해 다뤄보려 합니다. 유저의 프라이버시를 위해 유저가 탈퇴하거나 오랜 시간 접속하지 않는다면 유저의 데이...
Hyperconnect|Hyperconnect Team
2024.11.11
external
애셋팀 레거시 개선 (2) 쏘카존 관리 시스템 - 차량재배치 리팩터링
목차 소개 개선 목적 차량재배치 설명 카프카 스프링으로 변경된 아키텍처 및 코드 설명 4.1. 기존 코드 설명 4.2. 책임분리 테스트코드 작성 리팩터링과 전략패턴 마무리 1. 소개 안녕하세요. 쏘카 서비스 엔지니어링본부 애셋(Asset)팀 백엔드 개발자 원스톤입니다. 저는 쏘카 존과 차량 도메인을 개발하고 있습니다. 지속 성장하는 소프트웨어를 만들기 ...
Socar|Socar Team
2024.07.23
external
FMS(Fleet Management System) 주행이벤트 파이프라인 개선기
안녕하세요. FMS 엔지니어링팀의 렉스, 마르코입니다. 저희 팀은 쏘카 외 차량 관제를 위한 PoC(Proof of Concept)를 진행했으며, 그 일환으로 주행 이벤트 탐지 파이프라인을 구축했습니다. 이 과정에서 다양한 문제를 해결하며 파이프라인을 지속적으로 개선해왔습니다. 다음과 같은 분들이 읽으면 좋습니다. EDA(Event Driven Archit...
Socar|Socar Team
2024.06.11
external
풀필먼트 입고 서비스팀에서 분산락을 사용하는 방법 - Spring Redisson
어노테이션 기반으로 분산락을 사용하는 방법에 대해 소개합니다....
Kurly|Kurly Team
2023.05.17
external
Kurly에서 주문을 모니터링 하는 법
Legacy 시스템에서 주문 모니터링을 Elasticsearch로 이전했습니다....
Kurly|Kurly Team
2020.03.17
external
DevOps 엔지니어의 Redis Test 분투기 - Part 1
Redis 테스트를 진행했습니다....
Kurly|Kurly Team
2020.03.04