직급별 역량 체계 구축을 위한 개발자 테스트 솔루션
엘리스
2023. 8. 18.
업종, 규모
도입 서비스
도입 목적
개발자 직무 역량 평가
우리FIS
우리FIS는 은행, 신용카드, 증권, 보험 등 금융업 전반의 IT 개발 및 운영을 서비스하는 종합 금융 IT서비스 회사입니다. 국내 최초로 개발부터 IT 인프라 운영에 이르는 토탈 IT 아웃소싱 모델을 구현하였으며, 자체 표준 개발 프레임워크 구축을 완료하는 등 디지털 혁신에 박차를 가하고 있는데요. 특히 기반 기술을 강화하고 체계적인 내부 개발 직무 역량 평가를 통해 디지털 전환 가속화에 힘쓰고 있습니다. 우리FIS는 디지털 전환에서 중요한 디지털 역량 진단하기 위해 2022년부터 엘리스 테스트 솔루션을 도입하여 개발자 역량 평가 솔루션을 진행하고 있습니다.
역량 체계 설계를 위한 테스트 솔루션 도입
우리FIS는 현업 개발자의 역량을 진단하여 직급별 역량 체계를 설계하고 기준을 정의하는 것을 목표로 개발자 역량 평가를 실시하였는데요. 특히 개발자의 실무 역량을 평가하는 것에 방점을 두었기 때문에 언어별로 테스트를 진행하였으며 ‘검색창 만들기’, ‘API 개발하기’ 등 현업 태스크 단위로 문항을 출제하였습니다. 최종적으로 개발자와 전문가의 문항 합의 및 검토를 거친 뒤, 엘리스 테스트 플랫폼에서 200~300여 명의 개발자를 대상으로 대규모 온라인 직무 역량 평가가 진행되었습니다.
실무 태스크 단위로 개발자 역량 평가 가능
우리FIS 테스트에서 무엇보다 중요한 것은 체계적으로 개발자 직무 역량 평가를 하는 것이었습니다. 실제 업무 역량을 평가하기 위해 SQL, 자바, C, 자바스크립트 등 현업에서 사용하는 언어별로 코딩테스트가 진행되었으며, 태스크, 기능 단위로 문항이 출제되었습니다. 또한 엘리스 테스트 플랫폼은 실제 개발 환경과 유사한 테스트 환경에서 시험이 이루어지기 때문에 응시생들이 테스트 환경에 빠르게 적응하고 시험에 집중할 수 있었습니다.
응시 중 검색 혹은 레퍼런스 확인이 필요한 경우, 엘리스테스트 내 ‘레퍼런스 페이지 기능’을 통해 필요한 라이브러리를 가져와 사용할 수 있도록 진행하였는데요. 실제 업무에서는 필요한 라이브러리를 검색해서 사용하는 것도 능력이기 때문에 엘리스테스트에 레퍼런스 페이지 기능이 포함되어 있습니다.
▲ 테스트 예시 화면(실제 우리FIS 테스트 문항이 아닌 참고를 위한 예시 문항입니다)
엘리스는 기업이 속한 산업군과 응시자의 업무를 고려하여 문항을 설계합니다. 따라서 우리FIS가 금융 산업군임을 고려하여 은행권 데이터베이스에 맞춰 문항이 제작되었는데요. 백만 개 이상의 데이터셋을 만들어 문항을 출제하였으며, SQL 과목의 경우 실제 은행에서 사용하는 칼럼에 맞춰 출제하는 등 금융 산업 맞춤형 문제를 통해 실제 현업 개발자 직무 역량 평가를 진행하고자 하였습니다.
관리 및 감독이 간편한 테스트 플랫폼 환경
대규모 온라인 시험 플랫폼은 수백 명이 동시에 응시하며, 각자 다른 장소에서 시험을 보기 때문에 최대한 관리자가 간편하게 감독할 수 있도록 테스트 환경이 세팅되어 있습니다. 특히 엘리스 테스트 플랫폼은 원격 신분증 인증 기능을 통해 쉽고 빠르게 신분증 인증이 진행되었는데요. 화면 QR코드를 통해 신분증 촬영 및 제출이 이루어지며, 개인정보 마스킹이 바로 가능하기 때문에 개인정보 유출 우려 없이 신분증 인증을 진행할 수 있었습니다. 또한 테스트 관리자는 신분증을 시험 중이나 시험 완료 후에도 언제든 확인할 수 있어 손쉽게 신분증 검수 및 컨펌이 이루어졌습니다. 시험 도중 혹은 시험이 끝난 후에도 언제든 대시보드 확인이 가능하여 관리자가 편리하게 관리할 수 있습니다.
▲QR코드로 간편하게 진행되는 신분증 인증
▲ 시험 완료 혹은 시험 도중에도 실시간 확인이 가능한 관리자 대시보드
부정행위 차단을 위한 모니터링 및 솔루션
우리FIS 개발자 직무 역량 평가는 100% 온라인 시험 플랫폼으로 진행되며, 응시생의 자택에서 이뤄지다 보니 부정행위에 대한 우려도 있었는데요. 엘리스테스트의 3중 모니터링 시스템 및 솔루션을 통해 부정행위를 미리 방지할 수 있었습니다. 3중 모니터링 시스템은 응시자의 웹캠, 모니터, 모바일 3가지 화면을 관찰 및 감독할 수 있는 시스템인데요. 3중 모니터링 시스템으로 사각지대까지 빈틈없이 모니터링이 가능했으며, 녹화 기능으로 추후 검토까지 진행할 수 있습니다. 또한 모니터링 기능을 통해 부정행위가 의심되는 행동이 발견되면 개별 메시지를 보내거나, 모니터링을 진행하고 있는 관리자가 몇 명인지도 확인할 수 있어 원활하게 시험을 관리 및 감독하는 것이 가능했습니다.
▲ 모니터, 웹캠, 모바일 화면을 관찰할 수 있는 3중 모니터링 시스템
또한 엘리스테스트는 듀얼 모니터를 통해 답안을 검색하거나 공유하지 못하도록 환경을 통제하거나 SNS, 메모장 등의 타 프로그램 사용 여부를 파악하고 감독관에게 보고하는 기능을 제공하는데요. 특히 최근에는 ChatGPT의 등장으로 인해 ChatGPT를 활용한 부정행위를 우려하는 경우가 많았습니다. 엘리스 온라인 시험 플랫폼은 이러한 부정행위까지 철저하게 막을 수 있도록 자동 부정행위 방지 솔루션을 제공하고 있습니다. 따라서 우리FIS 테스트 시에도 전체 화면을 해제하거나 특수키를 입력하는 경우 화면이 자동으로 블록(block) 처리되었으며, 문제 유출을 막기 위해 지시사항은 복사 및 붙여넣기가 불가능하도록 세팅되었습니다.
▲ 전체화면 해제 시 자동으로 블록 처리되는 플랫폼 화면
우리FIS 개발자 직무 역량 평가는 실무 개발 능력을 평가하기 위해 테스트 목적, 난이도, 퀴즈 및 실습 등의 다양한 부분을 고려하여 설계되었는데요. 체계적으로 실무자의 디지털 역량 진단할 수 있는 문항과 안정적인 테스트 플랫폼으로 개발자 역량 평가를 원활히 진행할 수 있었습니다. 또한 이러한 역량 평가를 통해 내부적으로 신뢰도 높은 역량 체계를 구축하는 기반을 다질 수 있었습니다.
엘리스는 수년간 여러 기업의 DX 교육을 제공하며 교육과 평가에 대한 기업의 니즈를 파악해 왔는데요. DX교육을 통해 쌓아온 학습 데이터를 기반으로 산업군별, 직군별, 직급별 필요한 능력과 수준의 차이를 이해하고 이를 바탕으로 체계적인 직무 역량 평가 솔루션을 구성합니다. 우리FIS 테스트 사례와 마찬가지로 이미 많은 기업에서 엘리스테스트 솔루션으로 개발자 역량 평가를 진행하고 있는데요. 프로그래밍 언어 지식뿐만 아니라 데이터 사이언스, AI, 데이터 리터러시, 코드 리뷰 등에 대해 종합적으로 디지털 역량 진단 평가할 수 있습니다. 실제 직무 역량을 가늠할 수 있는 테스트가 필요하거나, 개발자 역량 평가에 대해 고민이 있으시다면 엘리스테스트를 살펴보시길 추천해 드립니다.
*해당 콘텐츠는 저작권법에 의해 보호받는 저작물로 엘리스에 저작권이 있습니다.
*해당 콘텐츠는 사전 동의 없이 2차 가공 및 영리적인 이용을 금하고 있습니다.