인공지능에게 LEET를 풀게 해 보았다.
안녕하세요. 해커스 로스쿨 LEET 언어이해 이재빈 강사입니다.
요새 chat GPT가 여기저기에서 화제입니다. chat GPT가 미국 의사 면허 시험도 통과했다는 소식에 LEET 언어이해 강사로서 chat GPT가 LEET에서는 몇 점을 맞을 지가 갑자기 궁금해져서 한 번 문제를 풀려보기로 했습니다.
chat GPT에게 글을 읽고 문제를 푸는 훈련을 진행해보자고 제안한 뒤에, 작년에 시행되었던 LEET 언어이해 첫 번 째 지문을 읽게 해 보았습니다.
그만 chat GPT에게 에러가 뜨고 말았습니다. 예상치 못한 결과에 당황했지만 "지문 읽기가 필요 없는 문제를 풀게 해보면 어떨까?"라는 생각이 들어서 LEET 언어이해 문제 중 '윗글을 읽고 답하는 형식'이 아닌 문제를 하나 풀게 해 보았습니다.
2023 LEET 언어이해 22번 문항을 풀게 해 보았습니다. 헤겔 철학과 관련된 지문을 읽고 푸는 문제인데 chat GPT에게는 지문을 제공해 주지 않은 채로 풀게 해 보았습니다.
역시 인공지능답게 지문을 읽지 않고도 배경 지식만으로 문제를 푸는 클라스를 보여주었습니다.
덤으로 제가 자체 모의고사를 위해 제작하고 있는 철학 지문 문제들도 풀게 해 보았는데 모두 정확한 답을 맞추는 클라스를 보여주었습니다.
수능 국어나 언어이해에서 배경지식 공부의 중요성을 확인할 수 있는 지점이었습니다. 인공지능 수준의 배경지식을 갖출 수 있다면 지문을 읽지도 않고 문제를 풀 수 있다는 의미입니다 ㅎㅎ
혹시 헤겔 관련 문제는 배경지식을 적용하기에 너무 용이한 것이 아닌가 싶어 다른 문항들도 풀려 보았는데, 다른 문항들도 대부분 지문을 읽지 않고도 배경지식만을 활용하여 쉽게 풀어내는 것을 확인할 수 있었습니다.
그런데 흥미롭게도 chat GPT가 틀리는 문항도 꽤 있었는데요. (지문을 안 읽고 풀리기는 했지만 ㅎㅎ)
위 문제의 경우 답이 1번인데 5번을 골랐습니다. 5번은 많은 학생들이 골랐던 오답이기도 했는데 인공지능도 똑같은 실수를 범한다는 사실을 확인할 수 있었습니다.
0 XDK (+0)
유익한 글을 읽었다면 작성자에게 XDK를 선물하세요.
-
김기원쌤 파이널은 들어봐서 모의논술 풀고 해설하면 끝이었던 것 같은데, 여상진쌤...
-
어떡할까여 이비에스 정리하는 파이널 강의인데 10강정도에 한 강당 40~50분이에요...
-
주민등록증 분실해서 오늘 새로 발급 받았는데 수능원서 접수 사진이랑 달라도 ㄱㅊ나요?
-
어 그래 밥묵자 4
자리해라
-
계획세우고 자꾸 틀어짐 수특수완 다풀고싶은데 영어빼고 전과목 다...
-
근데 니만 시끄러운거 아니니까 제발 한숨 좀 그만 ㅅㅂ. 니가 더 시끄러
-
예비고3 1
수학은 과외 시작했고, 영어는 노베라 단어외우고있고, 사탐도 슬슬 시작했고,...
-
6평 난이도만 아니면 웬만하면 2 뜨는데 그정도 난이도로 나올 때 하방을 장담 못하겠음…
-
영어 질받 2
9일 정도 남았는데 질문 받음 나 영어는 진짜 잘함 + 인강 필요 없다는 주의임
-
왜 난생 처음 보는 점수가…
-
[필독] 미적분 29번 예측 (무조건 도움이 될거에요!) 0
안녕하세요! 김지형 강사입니다. 이번에는 2025학년도 미적분 납득가능한 FACT를...
-
커팅하면서 스트렝스 개떨어졌네
-
저희학교 문과 정시만 중경외시이 있고 학종은 다 떨어져서 여태 ㅈ반고로 알고있었는데...
-
사실 나도 그랭 진짜 올마 안남앗으니까 다들 화이띵 이때 예민한거 당연하니까 너무...
-
국어 기출 0
지금 옛기출 보고 있는 중인데 독서 파트에서 음악 관련 부분은 안풀고 버려도...
-
이거 난이도 어떠신가요? 전 풀다가 어려워서 그냥 버렸습니다
-
수능등급컷보니까 확통은 3등급이 72점정도던데 68이 3등급될 확률은 없나요
-
주니어 n제 하드에서도 겁나 어려운데 어캄
-
이왜진??????? 마스크쓰고 텀블러 가져와야게ㅛ다 개당황스럽네
-
국어에 시간 많이 쏟을 수 있음 문학이 상당히 모자란거 같아서 한다면 하루 모고...
-
물리수업때 경제수특 풀고있었는데 샘이 수업하다말고 앞으로 불러서 온갖망신다주심….....
-
아침 7시반부터 통역에 번역에 낮에도 통역에 번역에... 자꾸 재촉하고... 미치겄다 ㅠㅠ
-
앰생새끼들 교실 뒤에서 토토하면서 떠들고 좀 유한 선생들은 얘네 떠들게 못하긴 커녕...
-
아니 3
외국인 교수님이 아이스브레이킹한다고 요즘 핫하다고 아파트 틀었음 아니 내가 이거...
-
무등비 삼도극 이제 아예 안나오나요?
-
아님 본인 선택이니 그러러니 하나요
-
그냥 무논리로 자꾸 감이오는데 이거 극으로도 충분히 무대 밖에서 안으로 정보넣고...
-
-
흠 영어 무섭네 3
어렵게 나올 가능성 커보이는데
-
[속보]문체부, 정몽규 대한축구협회장 ‘자격정지 이상’ 중징계 요구 1
대한축구협회에 대한 특정 감사를 진행한 문화체육관광부가 정몽규 축구협회장에 대해...
-
중간중간 실모도 쳤어서 12일치를 이제 끝냄 마지막 회차 좀 쉬운지 다 맞음 킬러...
-
앞길이 어둡게만 보였는데 성냥 한 개비라도 밝힌 느낌 긴 시간의 방황 끝에 드디어...
-
ㅠㅠ
-
이제야 느끼는 내가 너무 싫어ㅠㅠ
-
슬픔과 기쁨이 반반 어우러진다 >> 이 구절을 슬픔이 해소된다로도 볼수 있나요?
-
좀 잘 맞길래 감좀 잡았나 자만했는데 좀만 어려운 지문 푸니까 와르르륵.. 새로운...
-
ㄴ선지 이건 진짜 처음 보는데 뭐 어떻게 해야 하는 거예요? 모르는 거라 공부하려고...
-
평가원이 국어 과학지문을 물리, 화학으로 뒤지게 어렵게 낸다면 국어에서 표점 높게 받을 수 있음
-
-
수시 반수라 최저 맞춰야 해서 국 수 생 으로 생각하고 있었는데요 반수 늦게...
-
전 몇십억을 준다해도 안할듯요 진짜 죽기전에 못나갈거 같음.....
-
기습 우정쌤 찬양 13
우정쌤이 나 공부 되게 잘하는줄 아시는데... 더 열심히 살게요 선생님
-
스카다니다가 7
학교오니까 책상 진짜 작네 책한권 두고 엎드리면 다차는구나
-
국어 과학지문을 물리 화학 지문으로 내버려서 국어에서 이득보라는 평가원의 큰계획이시다(제발)
-
밑으로 흐르니까 눈물이 흐르는거 같아요.
-
오르비 피셜임
-
어그로 ㅈㅅ.. 테일러가 생명공동체랑 생명 공동체 그자체를 구분한거 맞나요? 사설...
-
에 갇힌다면 탈출에 얼마나 걸릴 것 같나요?
-
회기로 회기 엌ㅋㅋㅋㅋㅋㅋㅋ
-
A하며 B하는것은, C를 보여주는 것이겠군. 이런 선지 구조는 보통 A하며 B하는게...
와...
수능 문제들은 인공지능이 풀 수 있을만큼 정교하고 확실하게 만들어졌다 ㄷㄷ
반도체 ai 주식 지금 긁어모읍시다
ㅋㅌㅋㅋㅋㅋ
배경지식이 많으면 많을수록 치트키이긴하네요이거보고 리트따위 안보기로 결심했다
이거 보고 인공 지능이 되기로 했습니다 감사합니다
존 코너 게이야...
이거 보고 철학과 가기로 했다
배경지식으로 비문학푸는법 ㅇㄷ
chat GPT 공부법 어떠십니까
배경지식(570GB)
어라
어어
이거보고 ai가 되기로 결심했습니다
자, 이제 인강 강사 버리고
챗지피티 공부법 드가자~
올해는 챗지피T 풀커리 타야겠다..
이어폰 챙겨서 들어가기로 했읍니다..
왕...
수능문제는 AI도 틀릴 수 있다 ㄷㄷ..
사실 chat GPT는 생각보다 오류가 많습니다. 질문을 어떻게 하느냐에 따라서 같은 문제에 대해서 다른 답을 말하는 경우가 많습니다.
에이... 인공지능에게 저렇게 배경지식으로만 풀 수 있는 문제를 묻는건 구글에 헤겔에 대해서 질문하는 것과 다를게 없죠ㅠ
놀랍게도 헤겔 문제 뿐만 아니라 거의 대부분의 LEET 언어이해 문제가 인공지능에게는 '배경지식으로만 풀 수 있는 문제'에 해당합니다 ㅎㅎ
그쵸... 그래서 지문을 바탕으로 묻는 문제를 질의시키는게 제일 유의미한거 같아요
현재 단계에서는 문제가 무엇인지 이해하는(것처럼 보이는 것)만으로도 의미가 있는 것 같아요
아직 ChatGPT는 새로운 지식을 추론하고 만드는건 애매하니깐요
와..
선생님 저는 국어문제를 스도쿠풀듯 취미로 풀어보는 평범한 이십대 중반입니다.
리트강사라고 하셨는데, 제가 느끼기에 법학적성시험 2009년것과 2023년이 확 다릅니다. 난이도에서 말이죠.
물론 출제집단이 평가원에서 ~(갑자기 잊어버림..)으로 바뀌긴 했다지만, 어떤 사건들이 있어서 이렇게 확 바뀐걸까요?
단순 출제집단이 바뀌어서? 평가 목적이 달라져서?
2019년을 기점으로 출제기관인 법학전문대학원협의회가 공청회를 진행하고 출제방향을 대거 개편할 것을 공개적으로 천명한 바 있습니다. 2019년 이전과 이후의 LEET(특히 언어이해)는 아예 다른 시험이라고 보아도 무방합니다.
리트는 그러면 최근 시험이 어려운건가요?
선생님은 몇년 리트시험지가 제일 어렵다고 보시나요?
21과 22가 가장 어렵습니다. 가장 최근꺼인 23은 좀 쉬웠구요.