토스증권 Data Engineer

합류하게 될 팀에 대해 알려드려요

토스증권 Data Engineer는 Data Division 내 Data Platform Team에 속해 있어요
Data Platform Team은 토스증권에서 데이터를 활용하기 위한 모든 기술을 담당하고 크게 데이터 엔지니어링, 데이터 웨어하우스, 자체 분석 도구(TUBA) 개발, 그리고 검색 서비스를 담당하고 있습니다.

✅ Data Division이 궁금하신가요?

토스증권 Data Division은 세계 최고로 데이터를 잘 다루는 증권사가 되기 위해 데이터 기술, 서비스 그리고 데이터 기반의 의사결정에 기여하고 있어요.
역할에 따라 Data Platform Team, ML Team, Data Analysis Team으로 구성되어 있어요.
다양한 데이터 직군이 모여 밀접하게 협업하며 즐겁게 일하고 있어요.
또한 주기적으로 Tech Weekly를 진행하며 서로의 노하우를 공유하고 있어요. 본인의 흥미와 의지가 있다면 얼마든지 다른 직군의 업무와 노하우를 공유받을 수 있어요.
약 25명의 구성원은 2~12년 정도 다양한 연차와, 포털/은행/게임/스타트업 등 다양한 백그라운드를 가지고 있어요.


합류하면 함께 할 업무에요

토스증권에서 대량의 데이터를 효율적으로 처리하기 위한 다양한 데이터 기술을 담당해요.
Hadoop 기반의 데이터 플랫폼을 활용하여 토스증권의 DB, Log 데이터뿐만 아니라 다양한 투자지표까지 투자에 관련된 모든 데이터를 수집하고 제공해요.
초당 100만 건 이상의 메시지를 처리하는 Kafka 메시지 플랫폼을 운영하고 CDC, KSQL 등 다양한 컴포넌트를 활용하여 실시간 데이터 처리를 개발해요.
동료들의 안정적이고 효율적인 데이터 실험/분석 환경을 위한 도구를 개발하고 운영해요.
Elasticsearch 기반의 검색 플랫폼과 로그 플랫폼을 운영하면서 검색서비스와 로그 분석 환경에 기여해요.



이런 분과 함께하고 싶어요

대용량 데이터 처리를 위한 데이터 파이프라인(수집/처리/분석) 개발 경험이 필요해요.
데이터 어플리케이션 개발을 위한 소프트웨어 개발 역량(Java, Scala, Python 등)이 필요해요.
오픈소스 기반 분산 시스템(Hadoop, Kafka, Spark 등) 활용 경험이 필요해요.
Datalake Platform(Hudi, Iceberg, Deltalake 등)에 대한 활용 경험이 있으면 좋아요
새로운 기술에 대한 관심이 많고 실제 서비스에 적용하여 개선한 경험이 있으면 좋아요.
다양한 상황에서 최적의 솔루션을 찾을 수 있는 문제해결능력 및 원활한 커뮤니케이션 역량을 갖춘 분이면 좋아요.



이력서는 이렇게 작성하시는 걸 추천해요

일반적인 방법으로 처리하기 힘든 대규모 데이터셋이나 비정형 데이터를 다루어 본 경험이 있다면 이력서에 작성해주세요.
복잡한 데이터 파이프라인을 잘 관리하기 위해 자동화나 모니터링 환경을 구성한 경험이 있다면 작성해주세요.
데이터 기반 서비스를 개발해 본 경험을 적어주시면 좋습니다.
새로운 시도를 통해 풀기 힘들었던 문제를 해결하거나 개선을 이루어낸 경험을 적어주시면 좋습니다.


토스증권에서 사용하는 기술

대량의 데이터를 효율적으로 처리하고 데이터/ML 서비스 운영을 위한 다양한 오픈소스 기반의 플랫폼을 다루고 있어요.(Hadoop, Kafka, k8s, MLops)
Hadoop Ecosystem 기반의 데이터 플랫폼을 운영 중이에요.
사용하는 주요 컴포넌트는 Hadoop, Spark, Impala, Hive, Kudu, Kafka, Airflow, Jenkins, k8s가 있으며, 내부 인터널 툴도 개발하고 운영 중이에요.
실시간 처리는 KSQL과 Kudu를 이용하여 이벤트를 검출하거나 결과를 전달해요.