Data Engineer

About the role

AI가 사용할 수 있는 데이터를 만드는 사람을 찾습니다.
Connectionary는 다양한 데이터 소스로부터 비정형 정보를 수집하고, AI가 활용할 수 있는 형태로 연결하고 관리하는 플랫폼을 개발하고 있습니다.

우리는 정답을 이미 갖고 있는 회사보다, 함께 만들어가는 회사를 지향합니다.
새로운 데이터를 연결하고, 파이프라인을 만들고, 제품과 함께 성장할 Data Engineer를 찾습니다.

What you'll do

이런 일을 합니다.
• 다양한 데이터 소스(API, Database, Web, SaaS) 연동 및 커넥터 개발
• Telegram, Discord, X(Twitter), RSS, 뉴스 등 외부 채널 데이터 수집 및 모니터링
• PDF, Word, Excel, HTML 등 비정형 문서 데이터 처리
• 데이터 수집 및 처리 파이프라인 개발
• 데이터 정제 및 표준화
• 데이터 변경 감지 및 동기화 기능 개발
• AI가 활용할 수 있는 데이터 구조 설계
• 제품 개발팀과 함께 데이터 기능 설계 및 구현
함께 만들게 될 것
• 다양한 데이터 커넥터
• 실시간 및 배치 데이터 파이프라인
• AI 서비스용 데이터 처리 기능
• 데이터 수집 자동화
• 문서 처리 및 구조화 기능

Requirements

이런 분을 찾습니다.
• Python으로 실제 서비스를 개발해 본 경험
• SQL 및 데이터베이스 활용 경험
• REST API 이용/개발/배포 경험
• 데이터를 다루는 것을 좋아하는 분
• 새로운 기술을 배우는 것을 즐기는 분
있으면 더욱 좋습니다.
• 웹 크롤링 또는 스크래핑 시스템 개발
• 비정형 데이터 ETL/파이프라인 개발
• PostgreSQL, Elasticsearch, MongoDB 등 데이터 저장소 사용 경험
• AWS/GCP 등 클라우드 서비스 사용 경험
• 비정형 문서(PDF, DOCX, XLSX, HTML 등) 처리 경험
• LLM 및 RAG 활용 AI 서비스 개발 경험

Benefits

건강검진 및 식사 제공

Hiring process

서류전형 - 1차 면접 후 진행