현행 아키텍처

Job Scheduler: 작업을 스케줄링하고 관리하는 효과적인 웹 애플리케이션입니다. 사용자는 작업 생성, 수정, 삭제를 손쉽게 관리할 수 있으며, 배치 실행기의 상태를 모니터링할 수 있습니다. 로그 관리 기능은 시스템의 실행 상태를 실시간으로 추적하고 분석하여 중요한 인사이트를 제공합니다. 작업 실행에 실패한 경우, 설정된 알람을 통해 즉각적인 통지를 받을 수 있습니다. 또한, 작업 간의 종속성을 정의하여 복잡한 작업 흐름과 스케줄을 자동으로 조율할 수 있습니다.

Task Executor: 실제 작업 실행에 필수적인 런타임 환경을 제공합니다. Java 개발 환경에 최적화되어 있으며, 개발자는 이를 통해 탄력적인 배치 프로세스를 구현할 수 있습니다. 각 Task Handler는 구체적인 작업 단위를 실행하고, 여러 인스턴스에 분산 배치되어 높은 가용성을 보장합니다. 이 시스템은 작업 부하가 증가하거나 시스템이 확장될 때, 효율적인 작업 분배와 관리를 가능하게 합니다. Task Executor를 통해 개발자는 복잡한 데이터 처리 작업을 효과적으로 관리할 수 있습니다.

목표 아키텍처

Vue.js: 클라이언트 인터페이스 개발에 Vue.js 프레임워크를 적용, 반응형 UI를 구현합니다.

Prometheus와 Grafana: 시스템 모니터링을 위해 Prometheus로 데이터를 수집하고 Grafana로 시각화합니다.

ELK Stack: 로그 관리 및 트러블슈팅을 위해 Elasticsearch가 로그 데이터를 저장하고, Logstash가 로그를 수집, Kibana가 데이터를 시각화합니다.

Kubernetes: 컨테이너화된 애플리케이션의 배포, 확장 및 관리를 자동화합니다.

Docker: Outscaling과 로드 밸런싱을 통해 애플리케이션의 확장성과 시스템 안정성을 최적화합니다.

대시보드, 스케줄링 보고서

작업 수: 현재 등록되어 있는 작업의 총 개수를 나타냅니다.

트리거 수: 작업이 실행되어 생성된 트리거 로그의 총 개수입니다.

배치 수: 시스템에 등록된 배치 프로세스를 수행하는 Executor의 총 개수를 보여줍니다.

핸들러 수: 모든 Executor에 등록된 작업을 처리하는 핸들러의 총 개수를 표시합니다.

처리비율: 각 색상은 시스템에서 현재 진행 중인 다양한 상태의 작업을 나타냅니다. 초록색은 '성공', 빨간색은 '실패', 노란색은 '러닝' 의 상태입니다.

트리거비율: 시스템에 의해 발생된 트리거 로그의 유형을 나타냅니다. 각 색상은 트리거의 다른 유형을 나타냅니다.

에이전트비율: 배치 프로세스를 수행하는 에이전트들이 어떤 유형에 속하는지를 나타냅니다. 다른 색상은 시스템 내의 에이전트 유형을 분류하여 표시합니다.

처리내역: 일정 기간 동안의 작업 처리 추이를 나타내며, 다양한 색상은 특정 기간에 처리된 작업의 상태를 시각화합니다. 이 차트는 성공, 실패, 러닝 등의 상태를 시간의 흐름에 따라 비교할 수 있게 해줍니다.

전체 메뉴

대시보드: 애플리케이션의 핵심 정보를 요약하여 보여주는 허브입니다. 모든 중요한 지표를 이곳에서 확인할 수 있습니다.

작업 관리: 개별 작업에 대한 상세 정보와 현재 상태를 조회하고, 관리 작업을 수행할 수 있는 공간입니다.

작업 로그: 작업이 실행될 때마다 생성되는 로그를 상세히 분석하고 검토할 수 있습니다. 문제 해결과 성능 최적화에 필수적인 정보를 제공합니다.

배치 관리: 배치 프로세스와 관련된 Executor의 등록, 관리, 모니터링을 담당합니다. 시스템의 자동화된 작업을 효과적으로 관리할 수 있습니다.

핸들러 관리: 작업 처리 단위인 Task Handler를 관리하는 공간으로, Executor에 할당되는 작업들을 효율적으로 배분하고 조정합니다.

사용자 관리: 사용자 계정에 관련된 모든 관리 작업을 수행합니다. 여기서는 사용자를 생성, 수정, 삭제할 수 있고, 권한을 할당하는 등의 작업을 진행할 수 있습니다.