기업의 새로운 선택, 1주일 후
프로그램이 아니라 업무를 살펴봅니다.
기업은 프로그램이 아니라 업무를 기준으로 살펴보기 시작했습니다.
인프라 운영팀과 개발팀은 현재 운영 중인 386개 프로그램의 역할을 조사하기 시작했습니다.
데이터 탐색, 파일 선택, 전송, 연결 복구, 실행 기록, 후속 전송처럼 비슷한 역할을 서로 다른 프로그램에서 반복 구현하고 있음을 확인했습니다.
동시에 기업의 고유한 데이터 처리 로직을 수행하는 프로그램도 있었습니다. 모든 프로그램을 대체하는 것은 적절하지 않았습니다.
기존 자동화 프로그램 조사
서로 다른 프로그램에서 반복적으로 수행하는 일들이 있었습니다.
| 파일 선택 | 전송 | 복구 | 후속 실행 | 고유 처리 |
|---|
| daily_transfer.py | 공통적인 데이터 이동 기능 | 공통적인 데이터 이동 기능 | 공통적인 데이터 이동 기능 | 없음 | 없음 |
|---|
| backup_files.sh | 공통적인 데이터 이동 기능 | 공통적인 데이터 이동 기능 | 공통적인 데이터 이동 기능 | 없음 | 없음 |
|---|
| report_upload.py | 공통적인 데이터 이동 기능 | 공통적인 데이터 이동 기능 | 공통적인 데이터 이동 기능 | 공통적인 데이터 이동 기능 | 없음 |
|---|
| analytics_job.py | 공통적인 데이터 이동 기능 | 공통적인 데이터 이동 기능 | 없음 | 공통적인 데이터 이동 기능 | 기업 고유의 처리 기능 |
|---|
| service_export.sh | 공통적인 데이터 이동 기능 | 공통적인 데이터 이동 기능 | 공통적인 데이터 이동 기능 | 공통적인 데이터 이동 기능 | 없음 |
|---|
| data_transform.py | 없음 | 공통적인 데이터 이동 기능 | 없음 | 없음 | 기업 고유의 처리 기능 |
|---|
| archive_result.py | 공통적인 데이터 이동 기능 | 공통적인 데이터 이동 기능 | 공통적인 데이터 이동 기능 | 없음 | 없음 |
|---|
- 공통적인 데이터 이동 기능
- 기업 고유의 처리 기능
반복되는 데이터 이동 기능
- 전송 대상 파일 선택
- 서버, 클라우드 간 파일 전송
- 연결 장애 및 오류 대응
- 실행 조건과 후속 전송
- 파일 전송 이력 관리
기업에 고유한 업무 기능
- 기업의 데이터 분석 로직
- 업무 시스템의 데이터 생성
- 산업별 데이터 가공
- 서비스별 비즈니스 로직
- 기존 시스템 고유의 처리 기능
기업에 필요한 고유한 소프트웨어는 유지하고,반복되는 데이터 이동 기능을 분리하기로 했습니다.없애야 하는 것은 프로그램 자체가 아니라 불필요하게 반복되는 개발과 운영 업무였습니다.
Live context지금
1주일 후386개 프로그램의 실제 역할
현재 업무
- 기존 프로그램 조사진행 중
- 파일 전송 기능 분류진행 중
- 고유 업무 로직 분리진행 중
기업의 새로운 선택, 1개월 후
첫 번째 업무를 Flow로 구성합니다.
기업은 하나의 업무부터 운영 방식을 변경했습니다.
첫 번째 전환 대상으로 매일 실행되는 분석 데이터 전달 업무를 선택했습니다. 이 업무에는 파일 선택과 전송, 재시도, 결과 전달 등 여러 프로그램이 관여하고 있었습니다.
개발팀은 분석 자체를 수행하는 기존 시스템과 고유한 데이터 처리 프로그램은 그대로 유지합니다.
대신 파일을 전달하고 완료 조건에 따라 후속 전송을 시작하는 부분을 INNORIX Flow로 구성했습니다.
일정 기간 기존 운영 방식과 결과를 비교한 뒤 실제 업무에 적용하기로 했습니다.
첫 번째 전환 대상, 일일 분석 데이터 처리
기업은 전체 프로그램을 한 번에 변경하지 않습니다. 반복적으로 실행되고 전송 전후의 업무가 명확한 분석 데이터 전달 업무부터 전환하기로 했습니다.
- 기존 운영 방식
- 업무 분리
- 변경된 운영 방식
- find_daily_files.py전송 대상 파일 확인
- send_analytics.sh분석 서버로 전송
- retry_transfer.py실패한 전송 재시도
- analytics_engine기업 고유의 데이터 분석
- watch_result.py결과 파일 생성 확인
- publish_result.sh분석 결과 후속 전달
- write_transfer_log.py전송 실행 기록
여러 프로그램이 각각의 역할을 수행하고 별도의 분석 시스템과 연결되어 있습니다.
데이터 이동 업무
- 파일 선택 및 전달
- 전송 복구
- 결과 파일 후속 전달
- 전송 실행 기록
기업 고유의 분석 기능을 분리하고 데이터 이동이 필요한 부분을 Flow로 구성합니다.
Daily analytics data
INNORIX Flow- 실행 조건
- 일일 원본 데이터 준비 완료
- 전송 대상
- 업무 서버, 분석 서버
- 전송 조건
- 지정 파일 선택, 오류 시 복구
기업의 데이터 분석
기존 분석 프로그램이 결과 파일을 생성합니다.
기존 분석 시스템은 유지하면서 데이터 이동 및 후속 전송 업무를 Flow 운영 환경으로 구성합니다.
업무를 변경하지 않고업무 사이에서 이루어지는 데이터 이동 방식을 변경합니다.기존 시스템을 다시 개발하지 않고 데이터 이동 업무부터 변경했습니다.
Live context지금
1개월 후첫 번째 업무를 Flow로 구성
기업의 운영 환경
386실행 중인 기존 프로그램
1구성된 Flow
관련 서버24대
현재 업무
- 기존 분석 시스템유지
- 신규 데이터 전달 Flow시험 운영
- 기존 결과와 비교진행 중
기업의 새로운 선택, 2개월 후
기존 프로그램을 바로 종료하지 않았습니다.
OPERATING VERIFICATION
새로운 운영 방식은 기존 업무와 같은 결과를 만들어야 합니다.
- 정상 전송
- 연결 장애 시험
- 후속 전송 확인
정상 실행
- 파일 전달 결과
- 완료
- 오류 확인
- 정상
- 이후 처리
- 기존 방식 유지
정상 실행
- 파일 전달 결과
- 완료
- 오류 확인
- 정상
- 이후 처리
- 결과 확인 완료
연결 오류 발생
- 파일 전달 결과
- 일부 전달 후 종료
- 오류 확인
- 개별 로그 확인
- 이후 처리
- 재실행 정책 확인
전송 복구 진행
- 파일 전달 결과
- 연결 복구 후 완료
- 오류 확인
- 실행 상세에서 확인
- 이후 처리
- 전송 완료 후 후속 실행
후속 프로그램 실행
- 파일 전달 결과
- 완료
- 오류 확인
- 정상
- 이후 처리
- 별도 실행 기록 확인
후속 전송 실행
- 파일 전달 결과
- 완료
- 오류 확인
- 정상
- 이후 처리
- 관련 전송 이력 확인
전환 전 확인 대상
- 전송 대상 및 결과 파일일치
- 파일 저장 위치 및 처리 규칙일치
- 외부 시스템의 후속 업무검증 완료
- 장애 복구 및 재실행 방식검증 완료
검증되지 않은 업무는 전환하지 않았습니다.Live context지금
2개월 후기존 프로그램을 바로 종료하지 않았습니다.
기업의 운영 환경
386실행 중인 기존 프로그램
1구성된 Flow
관련 서버24대
현재 업무
- 기존 프로그램운영 중
- 시험 환경에서 결과 비교진행 중
- 장애 복구 및 재실행 검증진행 중
기업의 새로운 선택, 3개월 후
28개의 프로그램이 담당하던 업무
28개의 프로그램이 담당하던 영역을 6개의 Flow로 운영합니다.
기업은 첫 번째 전환 업무를 검증한 후 연관된 데이터 이동 업무의 전환을 진행했습니다.
기존 28개 프로그램이 담당하던 파일 전송 및 실행 제어 업무를 6개 Flow로 재구성했습니다. 각 Flow에는 해당 업무에 필요한 대상과 실행 조건, 후속 전송 방식이 포함되었습니다.
기존 프로그램은 바로 삭제하지 않고 일정 기간 보관하며 운영 결과를 확인했습니다. 기업 고유의 데이터 처리 프로그램은 기존 방식대로 운영했습니다.
첫 번째 운영 전환 완료
기존 운영 방식
28파일 전송 관련 프로그램
- 일일 파일 탐색 및 선택 프로그램, 4개
- 원본 데이터 전송 프로그램, 6개
- 전송 재시도 프로그램, 4개
- 분석 결과 감시 프로그램, 3개
- 결과 데이터 전달 프로그램, 7개
- 실행 기록 및 알림 프로그램, 4개
변경된 운영 방식
6업무별 Flow
- 일일 원본 데이터 전달운영 중
- 정기 분석 데이터 준비운영 중
- 분석 결과 후속 전달운영 중
- 서비스 운영 데이터 전달운영 중
- 프로젝트 데이터 전달운영 중
- 장기 데이터 보관운영 중
기존 기업 시스템
데이터 생성, 분석, 업무 처리 및 기업 고유의 프로그램은 기존 방식으로 운영됩니다.
관리하는 프로그램의 개수가 아니라관리해야 하는 업무가 명확해졌습니다.프로그램의 개수가 아니라 운영하는 업무를 중심으로 관리하기 시작했습니다.
Live context지금
3개월 후첫 번째 운영 전환
기업의 운영 환경
358실행 중인 기존 프로그램
6구성된 Flow
관련 서버24대
현재 업무
- 첫 번째 전환 영역운영 중
- 기존 프로그램실행 중지 및 보관
- 다음 전환 대상검토 중
기업의 변화, 6개월 후
비슷한 업무 요청이 다시 도착했습니다.
이전과 비슷한 업무 요청이었지만 대응 방식은 달랐습니다.
새로운 분석 환경이 도입되면서 원본 데이터와 분석 결과의 전달 업무가 추가로 필요해졌습니다.
개발자는 먼저 기존 시스템에서 추가적인 처리가 필요한 부분을 확인하고, 파일 이동에 관한 요구사항은 운영팀과 협의했습니다.
운영팀은 연결된 장비와 저장 환경을 확인하고 필요한 데이터와 실행 조건을 Flow로 구성합니다.
개발팀은 해당 프로젝트의 데이터 분석 및 서비스 기능 개발에 집중할 수 있었습니다.
신신규 프로젝트팀
새로운 분석 환경에서도 일일 데이터를 사용해야 합니다.원본 데이터를 전달하고 분석이 끝나면 결과 파일을 프로젝트 저장 환경으로 전달할 수 있도록 해주세요.
6개월 전에 받았던 업무 요청과 유사한 내용입니다.
개발팀의 업무
- 기존 프로그램 조사
- 신규 환경 연동 코드 작성
- 파일 선택 및 실행 조건 구현
- 오류 처리와 재시도 개발
- 후속 전송 구현
- 로그 및 실행 기록 구현
- 테스트 및 운영 반영
운영팀의 업무
- 신규 장비 및 저장 환경 연결
- 전송 대상 데이터 선택
- 실행 조건과 후속 전송 구성
- 전송 시험 및 운영 반영
개발팀
신규 분석 기능 개발
기업에 필요한 고유한 데이터 처리 및 분석 기능을 개발합니다.
개발 업무와 데이터 이동 운영 업무의역할이 달라졌습니다.새로운 파일 전송 업무가 반드시 새로운 프로그램 개발을 의미하지는 않았습니다.
Live context지금
6개월 후새로운 개발 요청이 도착했습니다.
기업의 운영 환경
214실행 중인 기존 프로그램
37구성된 Flow
관련 서버24대
현재 업무
- 신규 분석 업무 로직개발팀 담당
- 데이터 전달 Flow운영팀 구성
- 기존 업무정상 운영
기업의 변화, 1년 후
동일한 장애가 다시 발생했습니다.
08:32
ONE YEAR LATER, MONDAY
서비스 운영 데이터 전달이 완료되었습니다.
분석 결과 데이터 전달완료
Source: Analytics storage / Target: Service environment
실행 이력
- 08:00정기 업무 실행
- 08:05연결 중단
- 08:12연결 복구 및 전송 재개
- 08:32파일 전송 완료
후속 데이터 전달실행 시작
- 08:05 중단
- 08:12 복구
- 08:18 재개
- 08:32 완료
이전과 달라진 운영 방식
업무 담당자는 실행 결과와 복구 과정, 후속 전송 상태를 확인할 수 있습니다.
장애가 발생하지 않는 기업이 된 것은 아닙니다.장애에 대응하는 방식이 달라졌습니다.Live context지금
1년 후새로운 운영 환경
기업의 운영 환경
82실행 중인 기존 프로그램
64구성된 Flow
관련 서버24대
현재 업무
- 반복적인 데이터 이동 업무Flow 운영
- 기업 고유의 업무 로직기존 프로그램 유지
- 신규 업무 설계업무 중심 구성
기업의 변화, 1년 후
기업의 프로그램은 모두 사라졌을까요?
기업이 관리하는 대상이 달라졌습니다.
1년 동안 반복적으로 발생하는 파일 전송 업무를 중심으로 단계적인 전환이 이루어졌습니다.
386개 프로그램 중 304개는 실행을 종료했고, 82개는 기업에 고유한 처리 로직이나 기존 시스템 의존성 때문에 유지하고 있습니다.
운영팀은 64개의 Flow에서 업무별 실행 조건과 전송 대상, 실행 결과를 확인합니다.
새로운 파일 전송 요청이 들어오면 먼저 기존 Flow를 확장하거나 새로운 Flow로 구성할 수 있는지 검토합니다.
ONE YEAR OF TRANSITION
기업은 모든 프로그램을 전환하지 않았습니다.
1년 후
82개프로그램 유지
82개 유지304개 실행 종료
계속 운영하는 프로그램
- 기업 고유의 데이터 처리 기능
- 기존 시스템에 종속된 프로그램
- 특수 목적의 업무 자동화
- 추후 전환을 검토할 프로그램
Flow로 운영하는 업무
- 서버 및 클라우드 간 데이터 전달
- 조건에 따른 파일 전송
- 완료 후 이어지는 후속 전송
- 파일 전송 복구 및 결과 확인
직접 개발하는 것과 플랫폼에서 운영하는 것을 구분했습니다.수치는 가상의 기업 시나리오에서 설정한 운영 변화이며 실제 고객의 도입 성과를 나타내지 않습니다.
기업에는 여전히 자체 개발 프로그램이 있습니다. 다만 모든 데이터 이동 업무를 직접 개발하지는 않습니다.
오늘의 기업, 현재
개발자가 개발해야 하는 것
기업은 여전히 새로운 소프트웨어를 개발합니다.
새로운 서비스와 분석 기능을 개발하고 기업에 필요한 고유한 소프트웨어도 계속 만들어집니다.
하지만 파일을 선택하고 전달하고, 오류에 대응하고, 완료 후 다음 전송을 시작하는 기능을 모든 프로그램에서 반복적으로 만들 필요는 줄어들었습니다.
개발자는 기업에 필요한 소프트웨어를 개발하고, 운영 담당자는 기업의 데이터 이동 업무를 관리합니다.
MONDAY, 10:00
새로운 프로젝트가 시작되었습니다.
서서비스 기획팀
기존 분석 데이터와 새로운 사용자 데이터를 활용한 서비스를 개발할 예정입니다. 데이터 전달 업무도 함께 준비해 주세요.
현재 진행 중인 프로젝트
- 신규 서비스 기능 설계
- 데이터 분석 로직 개발
- 사용자 업무 기능 구현
- 서비스 검증 및 개선
기업에 필요한 새로운 소프트웨어를 개발합니다.
INNORIX, Flows
- 기존 분석 데이터 전달운영 중
- 신규 사용자 데이터 전달추가
- 서비스 결과 데이터 전달추가
- 정기 데이터 보관운영 중
서비스에 필요한 데이터 이동 업무를 구성하고 운영합니다.
기업은 이전과 마찬가지로 새로운 소프트웨어를 개발합니다.다만 모든 데이터 이동 기능을 반복해서 개발하지는 않습니다.개발해야 하는 것에 집중하고, 운영해야 하는 것은 운영합니다.
Live context지금
현재개발자가 개발해야 하는 것
기업의 운영 환경
82실행 중인 기존 프로그램
64구성된 Flow
관련 서버24대
현재 업무
- 기업 고유의 서비스 개발진행 중
- 데이터 이동 업무정상 운영
- 새로운 업무 요청Flow 구성 검토