인공지능에게 LEET를 풀게 해 보았다.
안녕하세요. 해커스 로스쿨 LEET 언어이해 이재빈 강사입니다.
요새 chat GPT가 여기저기에서 화제입니다. chat GPT가 미국 의사 면허 시험도 통과했다는 소식에 LEET 언어이해 강사로서 chat GPT가 LEET에서는 몇 점을 맞을 지가 갑자기 궁금해져서 한 번 문제를 풀려보기로 했습니다.
chat GPT에게 글을 읽고 문제를 푸는 훈련을 진행해보자고 제안한 뒤에, 작년에 시행되었던 LEET 언어이해 첫 번 째 지문을 읽게 해 보았습니다.
그만 chat GPT에게 에러가 뜨고 말았습니다. 예상치 못한 결과에 당황했지만 "지문 읽기가 필요 없는 문제를 풀게 해보면 어떨까?"라는 생각이 들어서 LEET 언어이해 문제 중 '윗글을 읽고 답하는 형식'이 아닌 문제를 하나 풀게 해 보았습니다.
2023 LEET 언어이해 22번 문항을 풀게 해 보았습니다. 헤겔 철학과 관련된 지문을 읽고 푸는 문제인데 chat GPT에게는 지문을 제공해 주지 않은 채로 풀게 해 보았습니다.
역시 인공지능답게 지문을 읽지 않고도 배경 지식만으로 문제를 푸는 클라스를 보여주었습니다.
덤으로 제가 자체 모의고사를 위해 제작하고 있는 철학 지문 문제들도 풀게 해 보았는데 모두 정확한 답을 맞추는 클라스를 보여주었습니다.
수능 국어나 언어이해에서 배경지식 공부의 중요성을 확인할 수 있는 지점이었습니다. 인공지능 수준의 배경지식을 갖출 수 있다면 지문을 읽지도 않고 문제를 풀 수 있다는 의미입니다 ㅎㅎ
혹시 헤겔 관련 문제는 배경지식을 적용하기에 너무 용이한 것이 아닌가 싶어 다른 문항들도 풀려 보았는데, 다른 문항들도 대부분 지문을 읽지 않고도 배경지식만을 활용하여 쉽게 풀어내는 것을 확인할 수 있었습니다.
그런데 흥미롭게도 chat GPT가 틀리는 문항도 꽤 있었는데요. (지문을 안 읽고 풀리기는 했지만 ㅎㅎ)
위 문제의 경우 답이 1번인데 5번을 골랐습니다. 5번은 많은 학생들이 골랐던 오답이기도 했는데 인공지능도 똑같은 실수를 범한다는 사실을 확인할 수 있었습니다.
0 XDK (+0)
유익한 글을 읽었다면 작성자에게 XDK를 선물하세요.
-
그는신인가?????
-
모교 방문 on 2
9평 신청 완료.
-
식을 보면 어떤 방향으로 가야할지 딱 보이는 사람들 보면 너무 신기하던데 단순한...
-
저희 모교는 9모 신청 받는 날 2분 컷 마감 됨
-
잇올!!!! 0
개같이 실패
-
잇올 클리어 9
와바바바바바바바바바바바바바박
-
다 적고 제출하니깐 대충 확정 뭐시기는 13시 이후라는 팝업떴는데 이거 신청...
-
러셀처럼 바로 마감될 줄 알고 10시 땡치자마자 했는데 좌석 9개 남았는데 신청됐네...
-
아.. 망했다.. 10
-
진짜 사이트개구리네
-
가만히 있지를 몬하노... 하루종일 일어나서 공부하다 책정리하다 나갔다... ㅅㅂ 화나네
-
[단독] “방송사고로 수능영어 독해부터 풀어”… 법원 “국가 책임은 없다” 9
대학수학능력시험 영어 시간에 발생한 방송사고로 듣기 평가에 혼선을 겪은 수험생들이...
-
현역의 고충은 생각보다 세군
-
국어 기출 개년 0
전과목 필수 개년만 하려도 하는데요..! 국어는 2017부터 푸는 게 좋다고 하는데...
-
대구에 이감오프 택배로 살 수있는 곳 아시는 분?? 2
제곧내. 제발용,,ㅠㅠㅠ 지방러라 슬퍼요..
-
“할머니 성추행범으로 몰아”…동탄경찰서, 또 강압 수사 의혹 3
[이데일리 강소영 기자] 성범죄자로 몰렸던 20대 남성이 결국 무혐의 처분을 받은...
-
다른 과목은 아직 총평조차 안올라옴 여기는 시장파이가 작아서 이런 외침조차 밖에선...
-
나 때는 그런것도 없었는데... 요즘 것들은... 떼잉...
-
???
-
하.. 뭐뭐써야할까요 ㅜㅜ 에
-
회사 망해가는데 스윗 ㅇㅈㄹ ㅋㅋㅋ
-
재수때 실패하고 지잡와버려서 반수하고있는데 갑자기 반수고뭐고 현타...
-
이렇게 기하에 진심이셨던 분이 기하를 버리시다니
-
국어 -> 강기분 1회독 수학 -> 강기분 1회독 영어 -> 강기분 1회독 화1...
-
지금까지 대학공부랑 수학만 하다가 다음주부터 국어 공부하려고 하는데 그냥 실모만...
-
A가 현재 B가 1억년전의 고지자기극이란 것까지는 이해 가능요 근데 왜 X가 현재...
-
원래는 여러 명을 좋아했지만 다 탈릅해 버렸는걸요
-
파일 다운만 가능한가요
-
"손가락 때문에 계약 취소"…르노코리아 영업사원들 '눈물' 3
르노코리아의 신차 홍보 영상에 '남성 혐오' 제스처가 담겼다는 주장이 제기돼 논란이...
-
해설강의 있는 강사 교재말고 마더텅을 사는 이유 무엇?
-
오부이 진주간다 9
가보자고
-
표 문제 하나 푸는데 2분~5분 걸리는데 정상임요? ㅈㄴ 어려우면 7분도 감
-
??
-
여타 중앙대, 경희대, 건국대, 동국대 등 여러 타 대학들을 공격하며 운영중인...
-
힐링은무슨처맞고올게요....... 이따가 문학 영어로 힐링 ^!!
-
기하 새로 시작하려는데, 반수로 지금하면 늦나?
-
문해력=어휘력 8할 국어는 문해력 문해력이 몬데 10덕아 - 오르비...
-
4일차 하.. 1
병원 다시 다녀 와야 겠다
-
관리형 독서실 3
관리형 독서실 한 달에 40만원 넘게 들어서요 교시제랑 휴대폰 관리 말고는 일반...
-
Ladies and Gentlemen, My name is Ryan from...
-
2025는 안나오는건가요?
-
카페인 땜에 6
두통 오는 경우도 있음?
-
적립 얼마나 함?
-
편의점 택배 보내는데 무게가 자꾸 -떠서 아르바이트생 부르니깐 왜 아르바이트생이 할...
-
오지훈 기출분석 1
해설강의 모든문제 다 들을필요없지? 강의 듣는데 시간너무 잡아먹음
-
저랑 이 글 보신 분글 모두 6모 등급 예상대로 나오길
-
사유: 책배송 지연... 아니 내 수특..
-
오늘 아침 7시까지 보내준다며...
와...
수능 문제들은 인공지능이 풀 수 있을만큼 정교하고 확실하게 만들어졌다 ㄷㄷ
반도체 ai 주식 지금 긁어모읍시다
ㅋㅌㅋㅋㅋㅋ
![](https://s3.orbi.kr/data/emoticons/dangi/035.png)
배경지식이 많으면 많을수록 치트키이긴하네요이거보고 리트따위 안보기로 결심했다
이거 보고 인공 지능이 되기로 했습니다 감사합니다
존 코너 게이야...
이거 보고 철학과 가기로 했다
배경지식으로 비문학푸는법 ㅇㄷ
chat GPT 공부법 어떠십니까
배경지식(570GB)
어라
어어
이거보고 ai가 되기로 결심했습니다
자, 이제 인강 강사 버리고
챗지피티 공부법 드가자~
올해는 챗지피T 풀커리 타야겠다..
이어폰 챙겨서 들어가기로 했읍니다..
왕...
수능문제는 AI도 틀릴 수 있다 ㄷㄷ..
사실 chat GPT는 생각보다 오류가 많습니다. 질문을 어떻게 하느냐에 따라서 같은 문제에 대해서 다른 답을 말하는 경우가 많습니다.
에이... 인공지능에게 저렇게 배경지식으로만 풀 수 있는 문제를 묻는건 구글에 헤겔에 대해서 질문하는 것과 다를게 없죠ㅠ
놀랍게도 헤겔 문제 뿐만 아니라 거의 대부분의 LEET 언어이해 문제가 인공지능에게는 '배경지식으로만 풀 수 있는 문제'에 해당합니다 ㅎㅎ
그쵸... 그래서 지문을 바탕으로 묻는 문제를 질의시키는게 제일 유의미한거 같아요
현재 단계에서는 문제가 무엇인지 이해하는(것처럼 보이는 것)만으로도 의미가 있는 것 같아요
아직 ChatGPT는 새로운 지식을 추론하고 만드는건 애매하니깐요
와..
선생님 저는 국어문제를 스도쿠풀듯 취미로 풀어보는 평범한 이십대 중반입니다.
리트강사라고 하셨는데, 제가 느끼기에 법학적성시험 2009년것과 2023년이 확 다릅니다. 난이도에서 말이죠.
물론 출제집단이 평가원에서 ~(갑자기 잊어버림..)으로 바뀌긴 했다지만, 어떤 사건들이 있어서 이렇게 확 바뀐걸까요?
단순 출제집단이 바뀌어서? 평가 목적이 달라져서?
2019년을 기점으로 출제기관인 법학전문대학원협의회가 공청회를 진행하고 출제방향을 대거 개편할 것을 공개적으로 천명한 바 있습니다. 2019년 이전과 이후의 LEET(특히 언어이해)는 아예 다른 시험이라고 보아도 무방합니다.
리트는 그러면 최근 시험이 어려운건가요?
선생님은 몇년 리트시험지가 제일 어렵다고 보시나요?
21과 22가 가장 어렵습니다. 가장 최근꺼인 23은 좀 쉬웠구요.