대학 · 06
측정값 하나가 판결은 아니다
점수, 탐지, 추천, 학위는 모두 사람의 길을 바꿀 수 있다. 평가의 유무가 아니라 누가 설명하고 누가 재검토하며 이번에 어디까지 증명했는지 물어야 한다.
학생의 과제 하나가 시스템에서 AI 생성 가능성이 매우 높다고 표시되었다고 해 보자. 화면의 숫자는 선명하고 이미 끝난 말처럼 읽힌다. 자기가 쓰지 않았다는 말이다. 그러나 측정값 하나가 정확히 무엇을 설명하는가? 누가 이 신호를 혐의 제기로 바꾸려 하며 어떤 근거로 이 과목의 결과를 결정하게 하는가?
멜버른대학교의 교직원 안내는 높은 AI 탐지 점수 자체를 학문적 부정행위 혐의를 제기할 충분한 근거로 삼지 않으며 추가 증거를 요구한다고 명시한다. 초고와 메모를 찾고 작업이 어떻게 만들어졌는지 이야기할 수 있다. 이 문서는 도구의 증거상 한계를 말하는 것이지 어떤 학생에 대한 판결이 아니다.
측정값이 정확해도 일이 전부 끝난 것은 아니다. 도구를 썼다고 자동으로 판단이 없다는 뜻은 아니다. 숫자가 기계에서 나왔다고 채택한 사람이 선택을 면제받지도 않는다. 어떤 요구를 적용하고 증거를 어떻게 다루며 어떤 응답을 허용하고 누가 최종 결론을 내리는가.
평가에 이런 설명이 필요한 것은 사람의 길을 바꾸기 때문이다. 과목 성적, 학위 자격, 추천서, 평가를 채택해 내린 징계와 지원 결정은 기회를 열고 닫을 수 있다. 이 작용을 권력이라 부르는 것은 평가자에게 악의가 있다고 비난하는 일이 아니다.
지도교수가 학생을 진심으로 지원하면서 거취를 결정할 평가권도 쥐고 있다는 두 사실은 함께 참일 수 있다. 좋은 마음이 지위의 압력을 없애지는 못한다. 견제도 평가를 없을 때까지 줄이려는 것이 아니다. 필요한 판단이 모든 질문을 통제할 권한까지 함께 얻지 못하게 하는 것이다.
절차는 실제 작용에 맞춰야 한다. 성적에 넣지 않는 연습 피드백과 학위를 받을 수 있는지 정하는 자격시험에 같은 무게의 절차가 필요하지는 않다. 그러나 말 한마디가 실제로 학위, 자금, 떠남을 막는다면 가볍게 말했고 몇 사람만 거쳤다는 이유로 작용까지 가볍게 설명할 수 없다.
먼저 형태만으로 판정하지 말자. MIT는 첫해 초반 일정 기간 합격 또는 무기록 방식을 쓰고, 브라운은 학생 GPA를 계산하지 않으면서 과목 평가 선택지는 둔다. 각각 범위가 있는 배치다. 평점을 계산하지 않는다고 평가가 없거나 평가의 모든 한계를 설명했다는 증거는 아니다. 평점 계산 자체도 곧바로 유죄로 만들 수 없다.
정말 볼 것은 지표 하나를 일 자체의 판단이 이미 끝난 것으로 기록했는가다. 작문 채점표는 큰 도움이 될 수 있다. 그러나 학생이 왜 자료가 신뢰할 만하지 않은지 물었는데 세칙에 따라 감점했다는 답뿐이면 세칙이 구체적인 설명을 대신한 것이다. 사용법을 밝히고 질문받을 수 있다면 표에 따라 채점하는 것 자체는 잘못이 아니다.
서술형 평가도 본래 더 좋은 것은 아니다. 햄프셔 칼리지는 서술형 평가를 소개하며 학습을 시작할 때 평가 기준을 정하도록 요구한다. 글 한 단락으로 바꾸었다고 자를 벗어난 것은 아니다. 자와 이유를 다른 방식으로 쓴 것일 수 있으며 여전히 사람이 책임져야 한다.
지표가 유일하고 바꿀 수 없는 목표가 되면 원래 평가하려던 일을 우회하며 표가 보고 싶어 하는 것만 배우도록 유도할 수 있다. 가능성이지 모든 곳이 그렇다는 말은 아니다. 효과는 사실에 따라 확인해야 한다. 판단을 생략하는 데 반대한다고 숫자는 반드시 나쁘고 서술은 반드시 참이라고 선언하는 것은 아니다.
어떤 결론은 사람의 자리를 나누어야 한다. 학위와 자격 같은 결정은 지도교수와 분리된 평가 자리에서 내려야 한다. 지도교수는 의견을 내고 학생은 보고 응답할 수 있으며 평가와 재검토를 지도교수 한 사람이 통제하지 않아야 한다. 깊은 의존에 대한 배치이지 지도교수에게 전문성이 없다는 선언이 아니다.
일반 과목마다 채점자를 모두 따로 고용해야 한다는 뜻은 아니다. 담당자는 가르치고 평가할 수 있다. 대학은 같은 사람이 조건을 주면서 평가하는 압력을 어떻게 처리하는지 설명해야 한다. 성적표에 들어가는 점수에는 근거가 필요하며 이의와 재검토는 담당자 밖의 자리에서 접수해야 한다. 학문적 결론을 바꾸려면 그에 맞는 능력과 직무도 필요하다.
지도교수가 수업도 맡으면 두 작용을 함께 보아야 한다. 모자를 바꿔 썼다고 원래 관계의 압력이 벗겨지지 않는다. 일상 피드백은 가벼울 수 있지만 정식 성적의 결과는 교실 평가 한 번일 뿐이라는 말로 줄일 수 없다. 견제는 호칭이 아니라 실제 경로를 따라가야 한다.
징계에는 또 다른 분리가 있다. 혐의를 제기하는 사람이 징계 결론까지 겸하지 않는 것이다. 부정행위 의심으로 과제에 영점을 주는 것은 이 글이 좋지 않다는 것뿐 아니라 행동 평가를 채택한 것이다. 교사가 제기할 수는 있지만 결론은 다른 자리에서 내리거나 확인해야 한다. 같은 영점으로 서로 다른 행위를 섞어 넘길 수는 없다.
추천서에도 양쪽이 있다. 쓰는 사람의 평가 근거와 다른 곳의 복종으로 추천을 결정하는지를 물을 만하다. 쓰는 사람이 아니라 이용하는 쪽이 왜 채택하고 얼마나 무게를 주며 대체 출처는 있는지도 물을 만하다. 유명인이 썼다고 모든 판단이 신뢰할 만한 것은 아니다. 질문할 수 있다고 지원자에게 좋은 말로 고쳐 쓸 권한이 생기지는 않는다.
자동화 평가를 쓰는 것도 채택이라는 행동이다. 왜 골랐고 측정값을 어떻게 결과로 바꾸며 재검토는 있는지, 언제 중단하는지 누군가 답해야 한다. 기계가 읽었다고 판단이 끝난 것은 아니며 사람이 마지막 확인을 누른 것으로도 부족하다. 계산과 함께 책임까지 넘길 수는 없다.
평가는 대학이 무엇에 보상하는지도 모두에게 알려 준다. 학생이 자료를 정리했음이 확인되었는데 공로를 모두 지도교수에게 주거나, 다른 기회를 막아 추가 노동을 강요했는데 늘어난 수치를 훌륭한 팀 운영으로 기록한다면, 평가는 자기 쪽에서 사람을 수단으로 삼은 행동에 다시 한번 보상한 것이다.
대학은 이런 행동이 밖에서도 더는 이익을 주지 않는다고 보장할 수 없다. 책임질 수 있는 것은 자기 평가와 자원이 그 몫을 더하지 않는 일이다. 원칙은 확인 가능한 기여와 행동에 놓여야 한다. 마음이 순수한지 짐작하거나 지위의 높낮이로 공로의 주인이 이미 정해졌다고 해서는 안 된다.
그러므로 학위는 제한된 기록이어야 한다. 어떤 작업을 확인했고 어떤 자료와 기준으로 무슨 평가를 했으며 어디까지 증명하고 어디는 보장하지 않는지 설명한다. 과제를 실제로 끝냈다면 진지하게 확인할 수 있다. 그러나 모든 미래의 일에서 잘 판단하리라 보증하지는 않는다.
그 종이가 고용주에게 가면 새로운 채택이 있다. 대학은 자기 기록에 답하고 그 기록으로 사람을 거르는 쪽은 자기 사용법에 답한다. 작업의 사실, 평가자의 판단, 이후 부여한 효력을 나누어야 한다. 기록이 사실이어도 요구하는 몇 가지를 채우는 법만 배울 수 있다. 좋은 표 하나로 이 한계를 없앨 수는 없다.
영국의 2022년 외부 평가 원칙은 학위 평가 쪽에 독립 전문가의 의견을 명시하면서 영국의 각 규제 체계에서 강제 요건은 아니라고 밝힌다. 외부 의견이 무엇을 할 수 있는지는 구체적인 위촉과 교내 규정 안에서 보아야 한다. 외부라는 직함이 있다고 누군가 모든 것을 독립적으로 뒤집을 수 있게 된 것은 아니다.
교수에게도 같은 질문이 간다. DORA는 학술지 지표로 개별 연구의 질 판단을 대신하는 데 반대하고, CoARA는 동료의 정성적 평가와 책임 있는 정량적 사용을 함께 둔다. 이미 있는 규범 문헌이지 어느 대학이 그대로 운영한다는 증거는 아니다. 모든 지표가 물러나야 한다는 말도 아니다.
학제 간 작업에서는 특히 한쪽 점수만으로 전체의 답을 대신할 수 없다. 누가 평가할 능력이 있고 여러 기준을 어떻게 만나게 할지는 별도로 마련해야 한다. 교사와 학생 평가의 기제를 나란히 읽을 수는 있지만 직무와 결과까지 하나로 섞을 수는 없다.
신뢰와 확인도 하나만 골라야 하는 것은 아니다. 프린스턴의 2026년 감독 배치는 교실 시험에 감독자를 요구하면서 명예제도와 학생 명예위원회의 위반 의심 사건 처리 직무를 유지한다. 감독 문서는 감독자가 관찰만 하도록 제한하고 의심을 발견해도 현장에서 시험을 중단하지 않게 한다. 기록은 해당 절차에 넘겨야 한다.
여기서는 문서에 근거해 그 변화만 말할 수 있다. 절차 전체가 완비되었다고 인증할 수는 없다. 학생이 판단 단계에서 증거에 어떻게 응답하는지는 다른 규정을 보아야 한다. 무감독이라는 신뢰를 거둔다고 학생의 소명 자리까지 함께 거두어서는 안 된다. 확인을 늘린다고 모두를 믿을 수 없는 사람으로 취급하는 것도 자동으로 성립하지 않는다.
확인은 정체성 하나로 사람을 미리 지목하거나 한 번 확인한 일을 평생의 꼬리표로 만드는 것을 피해야 한다. 보편적으로 확인하거나 구체적인 사건에 따라 확인할 수 있다. 규칙 자체에 질문할 수 있어야 하며 관찰과 측정값이 응답할 수 없는 판결로 바로 바뀌어서는 안 된다. 확인에도 자체 권력이 있어 제한이 필요하다. 평가로 이름을 바꿔야만 견제할 가치가 생기는 것은 아니다.
이 견제들도 새로운 종점은 아니다. 위원회, 두 번째 평가자, 외부 전문가 모두 잘못 판단할 수 있고 자기 판단에 답해야 한다. 남을 전문적으로 심사한다고 남은 영원히 자신을 심사하지 못하는 지위를 얻는 것은 아니다.
재검토를 두면 더 정확해진다고 약속하지 않고 어떤 채점 제도의 승리를 선언하지도 않으며 그 학생이 부정행위를 했는지 판정하지도 않는다. 먼저 압축되어 있던 일을 다시 펼친다. 측정값은 어떤 증거이며 이번 평가는 어떻게 이루어지고 누가 질문을 접수하며 각자가 실제로 어디까지 설명하는가.
화면의 백분율은 남아 있을 수 있고 성적도 끝내 내야 한다. 중요한 것은 숫자를 전부 지우는 일이 아니라 사람이 사라지지 않게 하는 일이다. 도구를 채택한 사람은 여전히 판단하고 평가받는 사람은 여전히 응답할 수 있어야 한다. 결론 뒤에도 이번 이 범위의 일만 끝냈음을 기억해야 한다.
원논문과 읽기 안내
《대학론》의 앞글과 본문 일곱 편을 바탕으로 쓴 중국어 독자용 산문 여덟 편을 옮겼다. 사람을 목적으로 삼겠다는 대학의 공개적인 방향을 논하며 실제 대학 전체의 순위를 매기거나 신념 심사를 입학·임용 조건으로 삼지 않는다. 가정한 장면과 출처를 밝힌 제도 문헌을 구별한다. 실제 규정은 자료의 날짜, 적용 범위, 해당 페이지가 설명하는 한도 안에서만 인용하며 확인하지 않은 제도를 없다고 하지 않는다. 규정은 실제 집행의 증거가 아니다. 저자가 제시하는 규범적 요구와 제안, 각 행위의 직무 책임, 현행 제도를 나누어 설명한다. 대학이 방향을 바꾸어도 사람의 기본적 보호는 사라지지 않으며 요금·평가·전문적 판단도 질문받는다는 이유로 일괄 취소되지 않는다. 개별 사안에 관한 법률·입학·학술 징계 조언은 제공하지 않는다.
멜버른대학교: AI 탐지 수치만으로 부정행위 혐의를 뒷받침할 수 없다 ↗
2022년 외부 평가 원칙: 독립 전문가 의견과 비강제적 지위 ↗
DORA: 학술지 지표로 연구 자체의 질을 대신하지 않기 ↗
CoARA: 동료의 정성적 평가와 책임 있는 정량적 사용 ↗