개발자 평가 플랫폼 DEVTH를 운영하는 구름이 개발자 대상 AI 활용 역량 평가 솔루션 ‘아이사(AISA, AI Skills Assessment)’를 출시했다. 이번 솔루션은 생성형 AI 도구를 실무에서 어떻게 활용하는지를 중심으로 평가 항목을 구성해, 기존 코딩 테스트의 한계를 보완한다.

아이사는 알고리즘 문제풀이 중심의 기존 평가 방식과 달리, 실제 개발 환경에서 AI 도구를 사용하는 시나리오 기반 테스트를 제공한다. 응답 정확도, 문제 해결 속도 외에도 질문 최적화 수준, 토큰 효율성, 프롬프트 엔지니어링 역량 등을 종합 평가하며 리소스 제한 조건 내 문제 해결 능력을 정량화할 수 있도록 구성됐다.

평가 과정에서는 ChatGPT, Claude 등 최신 LLM 모델이 활용되며, Google Gemini는 2025년 하반기 지원 예정이다. 보안 측면에서는 문제 유출 방지와 데이터 외부 유출 차단 체계를 도입해 기업 고객의 민감한 요구사항을 충족시킨다. DEVTH가 1000여 개 기업과의 협업을 통해 확보한 평가 운영 노하우도 기반이 됐다.

구름 류성태 대표는 “AI 도구가 실무의 필수 협업 파트너로 자리 잡은 만큼, 개발자의 실질적 활용 역량을 객관적으로 측정할 수 있는 기준이 필요했다”며 “AI 시대에 적합한 새로운 역량 기준을 제시해 개발자 채용과 교육의 방향을 제시할 것”이라고 밝혔다.

헬로티 구서경 기자 |