Dec 8

[운영/행정] 리크look터: 지원서 평가 자동화 시스템

기존의 학회 및 동아리 신입 부원 선발 과정은 운영진 1인당 평균 9.1명의 지원서를 검토해야 하는 부담이 있습니다. 또한, 명확한 기술이나 도구가 없어 '감'에 의존하는 비체계적인 선발이 이루어지는 경우가 많습니다. 이처럼 인력(People)의 한계, 비효율적인 방식(Process), 도구(Platform)의 부재는 선발 과정의 '공정성'과 '효율성'을 심각하게 저해하며, 선발 데이터를 체계적으로 관리하고 자산화하는 '데이터 자산화'의 가치를 놓치게 만드는 문제를 해결하고자 했습니다.

n8n 워크플로우와 Upstage Solar AI 모델을 기반으로 한 '리크룩터'라는 AI 에이전트를 개발했습니다. 이 시스템은 두 단계로 작동합니다.

평가 기준 생성: 관리자가 단체와 관련된 정보를 입력하면, AI가 이를 분석하여 정형화된 평가 기준(JSON)을 자동으로 생성합니다.

자동 평가: 지원자가 PDF 지원서를 제출하면 , 시스템이 지원서 텍스트와 앞서 생성된 평가 기준을 취합합니다. 이후 Orchestrator로 설정된 AI가 내부적으로 '분석가', '비평가', '옹호자'의 다각적인 시각으로 지원서를 토론형으로 평가하여 인간의 편향(Bias)을 최소화하고 객관적이며 공정한 평가 결과를 도출합니다.

1. 평가 기준 생성 (Workflow 1)

첫 번째 핵심 기능은 운영진이 원하는 인재상을 자연어로 입력하면, AI가 이를 분석하여 정형화된 평가 기준표(JSON)를 생성하는 것입니다.

작동 방식:

운영진이 '학회 설명 입력' 채팅을 통해 학회의 목표, 인재상 등을 자연어로 입력합니다. AI Agent1이 이 입력을 받아, '전문 컨설턴트'의 역할로 작동합니다.

AI는 자연어 설명을 바탕으로 평가 항목, 배점 가이드, 가중치 등이 포함된 구조화된 JSON 파일을 생성합니다. 생성된 평가기준.json 파일은 구글 드라이브에 자동으로 업로드되어, 이후 평가 단계에서 재사용됩니다.

2. 지원서 평가 (Workflow 2)

두 번째이자 가장 핵심적인 기능은 지원자가 PDF 지원서를 제출했을 때, AI가 다각도로 이를 분석하고 평가 리포트를 생성하는 것입니다.

작동 방식:

지원자가 '지원서 입력' 폼을 통해 지원서(PDF)를 제출합니다.

(Upstage API 활용) Upstage Document Parse 노드가 PDF 파일에서 텍스트를 즉시 추출합니다.

동시에, Workflow 1에서 생성된 평가기준.json 파일을 구글 드라이브에서 다운로드합니다.

추출된 지원서 텍스트와 평가 기준 JSON 데이터가 AI Agent (평가 오케스트레이터)에게 전달됩니다.

(Upstage API 활용) 이 AI 에이전트는 Orchestrator로 작동하며, 내부적으로 3개의 하위 AI 페르소나(데이터 분석가, 냉철한 비평가, 잠재력 옹호자)를 조율하는 '토론형 AI' 프로세스를 실행합니다.이 과정을 통해 편향을 최소화한 최종 평가(합격/불합격/보류), 요약, 세부 항목별 점수 및 근거가 포함된 JSON 결과가 생성됩니다.

최종 결과는 Notion 페이지에 자동으로 저장되어 리포트가 완성됩니다.

* Upstage API 활용

1. 문서 파싱 (Document Parsing):

사용 노드: Upstage Document Parse

역할: 지원자가 업로드한 PDF 지원서에서 텍스트를 빠르고 정확하게 추출합니다. 이는 AI 에이전트가 지원서 내용을 이해하고 분석할 수 있도록 데이터를 준비하는 첫 번째 단계입니다.

2. Solar LLM (Chat Model):

사용 노드: Upstage Solar Chat for Agent (모델: solar-pro2)

역할 (Workflow 1): AI Agent1을 구동하여, 운영진의 자연어 설명을 기계가 읽을 수 있는 구조화된 JSON 평가 기준표로 변환하는 복잡한 작업을 수행합니다.

역할 (Workflow 2): 프로젝트의 가장 핵심적인 AI Agent를 구동합니다. '수석 평가 오케스트레이터' 프롬프트에 따라 '분석가', '비평가', '옹호자'의 멀티 페르소나 토론 과정을 내부적으로 실행(Chain of Thought)하고, 편향이 최소화된 최종 평가 리포트를 생성하는 추론 작업을 담당합니다.

[운영/행정] 리크look터: 지원서 평가 자동화 시스템

📌 프로젝트 소개

🧐 문제 정의

💡 문제 해결

⚙️ 핵심 기능

🎬 데모 영상

👥 팀원 소개

💾 참고 자료