데이터 엔지니어링

고가의 비용 지불 없이도 비즈니스에 최적화된 데이터 분석 플랫폼을 가질 수 있습니다. 라이트스택은 수집부터 분석까지 모든 단계의 최적화 역량과, 민첩성·비용 효율 기반 경량 플랫폼 구축 경험을 보유하고 있습니다.

Open SourceLightweight ArchitectureReal-time Analytics

The Value We Deliver

애플리케이션, 시스템 설계, 오픈소스, 비즈니스 분석 분야의 경험을 바탕으로 설계합니다.

검증된 오픈소스 스택에 익숙합니다. 고가의 라이선스 비용 없이 엔지니어링 비용만으로 플랫폼을 구축할 수 있습니다.

Knowledge Sharing Session 을 통해 도메인 지식을 습득하고 비즈니스에 맞춘 설계를 합니다.

애플리케이션에서 데이터가 발생하는 지점의 코드를 최적화해 데이터 품질을 향상시킵니다.

기존 시스템 변경을 최소화하면서 점진적으로 신기술을 도입합니다.

데이터 통찰력 전달을 극대화하기 위해 전문 시각화 팀을 운영합니다.

여러 디바이스에서 발생하는 사용자의 비식별화된 행태 데이터를 실시간으로 분석해 제품을 추천합니다. 기존 Hadoop 기반 데이터 파이프라인에 영향이 가지 않도록 병렬로 ELK Stack 을 구성하였습니다.

ElasticSearchLogstashKibanaHive

Smart Factory 환경에서 실시간 데이터를 수집·분석합니다. MongoDB → CDC → Kafka → MySQL 파이프라인으로 실시간 마이그레이션을 처리했습니다.

Mosquitto (MQTT)MongoDBApache KafkaKafka ConnectMySQLReact

수백 대 서버의 로그를 수집하고 시스템 자원·네트워크 사용 현황을 모니터링합니다. Kafka 와 ELK Stack 으로 자원 활용을 최대화하는 설계를 적용했습니다.

ElasticSearchLogstashMetricbeatFilebeatKibanaApache KafkaInfluxDBGrafana