work_story

개발이력

프로그래머스 데브코스 (21.12~22.05)

• 위해물품 탐지 https://www.youtube.com/watch?v=rMkfd9ygG6U&list=PLz4XWo74AOafMLBg2MaxCteaK5drxIuu-&index=7

신규작업시작일 기술

• [2022-10-11]: (1)Dask-Cluster DevOps Environment Setup Guide - 최초등록 (2)HIGH_Memory GPU의 Multi-Instance(MIG) 방법 - 최초등록
• [2022-10-12]: (1)ML_Automation_DevOps_Project 명세작성시작 - 최초등록

To-Do List

• [2022-10-12]: (1) 리서치 자료 정리. (2) 전처리 자동화처리 기술 정리. (3) ML_Automation_DevOps_Project 명세서 작성. (4) Dask-Cluster Pytorch 최적화방안 기술

월간 업무내용 요약

2023년 1월

• AI심사 : Spark pandas 병렬처리 테스트를 위한 패키지 설치 및 성능테스트 : koalas, pyspark.pandas
• JupyterHub& JupyterLab 보안심사 패치 2건적용
• JupyterLab 렌더링 버그 해결
• 운영서버 모니터링
• 개발서버 계정&권한 관리

2022년 12월

• AI심사 : Spark pandas 병렬처리 테스트를 위한 패키지 설치 및 성능테스트 : koalas, ray. modin
• 파이썬 버전별(3.9, 3.8, 3.) ray, modin, pandas, numpy 버전별 호환성 커널 최적화,
• JupyterHub&JupyterLab 사용자커맨드 히스토리 수집기 개발서버
• 정보보안 - JupyterHub autulogout적용 및 보안사항 점검
• 운영서버 모니터링
• 개발서버 계정&권한 관리

2022년 11월

• AI심사: Spark pandas 병렬처리 테스트를 위한 패키지 설치 및 성능테스트 : koalas, ray. modin, dask
• 파이썬 버전별(3.9, 3.8, 3.) ray, modin, pandas, numpy 버전별 호환성 커널 최적화,
• 11월 11일 운영서버 야간모니터링
• [정보보안] JupyterHub & JupyterLab 사용자 실행커맨드 추가정리(os.system, subprocess, shlex, call) 및 로그수집개발방안 정리
• [팀내 커스텀패키지모듈관리방안] 커널별 커스텀 패키지목록 자동설정
• ML분석서버 SRE 보안점검
• 개발서버 계정&권한 관리

2022년 10월

• legacy 태블로연동 에러로그수집 프로세스 CDSW기반 전환개발
• 2Factor 보안작업 업무지원
• 운영서버 모니터링
• 개발서버 계정관리
• 개발서버 JupyterHub&JupyterLab 관리기능 서비스등록
• 개발서버 Dask-Xgboost/Dask_Pytorch GPU병렬처리 환경구성
• 개발서버 A100 GPU멀티인스턴스처리방법 기술공유

2022년 9월

• Docker local Repository 구축
• Nexus3 Local Storage 구축
• AI모델검증 프로세스 구축.
• 2Factor 보안작업 업무지원
• 운영서버 모니터링
• 개발서버 JupyterLab 데이터분석가용 최적화작업.
• 개발서버 JupyterLab 보안작업.