인공지능에게 LEET를 풀게 해 보았다.
게시글 주소: https://i.orbi.kr/00062055666
안녕하세요. 해커스 로스쿨 LEET 언어이해 이재빈 강사입니다.
요새 chat GPT가 여기저기에서 화제입니다. chat GPT가 미국 의사 면허 시험도 통과했다는 소식에 LEET 언어이해 강사로서 chat GPT가 LEET에서는 몇 점을 맞을 지가 갑자기 궁금해져서 한 번 문제를 풀려보기로 했습니다.
chat GPT에게 글을 읽고 문제를 푸는 훈련을 진행해보자고 제안한 뒤에, 작년에 시행되었던 LEET 언어이해 첫 번 째 지문을 읽게 해 보았습니다.
그만 chat GPT에게 에러가 뜨고 말았습니다. 예상치 못한 결과에 당황했지만 "지문 읽기가 필요 없는 문제를 풀게 해보면 어떨까?"라는 생각이 들어서 LEET 언어이해 문제 중 '윗글을 읽고 답하는 형식'이 아닌 문제를 하나 풀게 해 보았습니다.
2023 LEET 언어이해 22번 문항을 풀게 해 보았습니다. 헤겔 철학과 관련된 지문을 읽고 푸는 문제인데 chat GPT에게는 지문을 제공해 주지 않은 채로 풀게 해 보았습니다.
역시 인공지능답게 지문을 읽지 않고도 배경 지식만으로 문제를 푸는 클라스를 보여주었습니다.
덤으로 제가 자체 모의고사를 위해 제작하고 있는 철학 지문 문제들도 풀게 해 보았는데 모두 정확한 답을 맞추는 클라스를 보여주었습니다.
수능 국어나 언어이해에서 배경지식 공부의 중요성을 확인할 수 있는 지점이었습니다. 인공지능 수준의 배경지식을 갖출 수 있다면 지문을 읽지도 않고 문제를 풀 수 있다는 의미입니다 ㅎㅎ
혹시 헤겔 관련 문제는 배경지식을 적용하기에 너무 용이한 것이 아닌가 싶어 다른 문항들도 풀려 보았는데, 다른 문항들도 대부분 지문을 읽지 않고도 배경지식만을 활용하여 쉽게 풀어내는 것을 확인할 수 있었습니다.
그런데 흥미롭게도 chat GPT가 틀리는 문항도 꽤 있었는데요. (지문을 안 읽고 풀리기는 했지만 ㅎㅎ)
위 문제의 경우 답이 1번인데 5번을 골랐습니다. 5번은 많은 학생들이 골랐던 오답이기도 했는데 인공지능도 똑같은 실수를 범한다는 사실을 확인할 수 있었습니다.
0 XDK (+0)
유익한 글을 읽었다면 작성자에게 XDK를 선물하세요.
-
문이과 합산한 점수로 문과 밖에 없는 외대 이긴 거 자랑하고 다니는 거ㅋ 경기도...
-
풀러 가기:...
-
개재밌다
-
아실 분들은 아시겠지만, 이번에 소소하게 현강을 하게 되었습니다. (진짜 소소함)...
-
생명 엣지 질문 3
생명을 안정 2등급을 맞고 싶어서 엣지 보려고 하는데요, 제가 엣지 1권을 보니까...
-
이거 수강예약하고 전화해야돼?
-
자신감을 잃게되었던 거 같음 현재 스펩157에 98키로이고 지금은 먹는 재미로만...
-
신민우 특강 0
들을만함 ? 수1수2던데
-
감기가 아닌건가
-
취중실모 궁금하네
-
아무 의미도 없긴한데 그냥 나오면 좋겠다 ㅎㅎ
-
6모 미적 92인데 풀만함??(난이도 측면에서.. 문제 퀄은 노상관) 사설은 80-92진동임
-
엊그제는 수학이 아리까리 하더니만 어제는 영어 괜찮았는데 국어가 비틀거리고 오늘은...
-
우리집앞에 다른학원 차 3대 쫙 서있네 ㅋㅋ 난 3개월 다녀봄
-
'수능 저작권' 판결에 대해서 오해가 있으신 것 같은데 2
보도자료에 나온 판결문을 분석해보면, 단순히 '저작권이 있는 작품'을 허락없이...
-
이해할려고 하는 게 잘못이지 ㅅㅂ.............
-
큰일났다...어쩌지 화학 런쳐야하나..
-
나는 아무것도 하지 않고 내버려두면 살이 찌는 체질이다. 그것과는 대조적으로 아내는...
-
6모 기준 15
언매 87 수 100 영 2 물2 50 지2 50 이면 어디감?
-
님들은 재종마녀가 대학 떨어져서 우는 모습 상상하기도 함??? 아니면 재종마녀가...
-
얼마나 걸리셨나요? 강의+워크북 다해서.. 저는 군대라서 4개월만에 다 끝냈네요.....
-
국어 1
내년에 국어 김동욱 선생님 커리 타려고 하는데 일클래스 일주일에 몇개 들어야하나요...
-
올해 비문학 0
논리학 킬러
-
아.... 진짜 올해 푼거중에 손에 꼽게 좋았는데 아쉽네용
-
* 일반 약국 개국시 - 자리, 투자금, 개인 역량에 따라 수입 차이가 큼 * 근무...
-
첫 정답자 1000덕 드리겠습니다!
-
개학 D-10 0
? 나 한 거 없는 거 같은데?
-
수1이너무싫다 3
수투는 섹시하고 이름도 미분 적분 극한이라 간지 ㅈ되는데 수1은 거듲제곱 ㅇㅈㄹ...
-
어차피 군대 가야될꺼 대학 중간에 애매하게 가는거보다 그냥 군대에서 수능 보면서...
-
수2 쌩노베는아닌데 중2때이후로 한적없고 시발점 theme9까지했는데...
-
일취 띄엄띄엄이라도 들어보니 개인적으로 선생님 하는 말씀은 뭔가 다비슷ㅎㅐ서 물론...
-
수능 관련 일을 하면 실패했을 때 미련이 남을 것 같네요
-
진짜 쎄하다 4
이제 3달 남았네 어떡하지
-
반영비 변태적으로 높은걸로 아는데 수학 못하는데 서강대 가는거 불가능하죠? 물론...
-
수능 대비용으로 국어만
-
하늘이 핑크색 2
날도 시원해서 딱 좋군.
-
근데 이쁜여자보다 페이커가 더 좋음 어캄
-
오늘은 영어 어순의 비밀을 알아보겠습니다. 제 본명은 김태영입니다. "김"이...
-
해린은 신이에요 0
ㅇㅇ
-
진짜 뜬금없이 학교 도서관에 있을 줄이야 내일 확인하러 가야지
-
뉴런 하루에 몇 강 들어야 함??? 하루에 한 띰씩 하려고 했는데 띰마다 강의 수...
-
이원준 계간지 하고있는데 부족한거 같아서 하트브레이커는 과하다고 하고..
-
도무지 비율관계 쓸 각이 안보여서 걍 45도 이용해서 밀었는데 내가 이 띰을 제대로...
-
대체 뭔 강의임? 글 읽어보면 문제푸는방법? 정리인거 같은데 약간 배성민 드리블이랑 비슷함?
-
약팔이들 다틀리고 정작 맞추는사람은 상상 이감 출제진임 ㅋㅋ GOAT이시여..
-
조정식 선생님 강의 들어보려 합니다 고1때부터 지금까지 영어는 쭉 2등급...
-
자기 작품이 출제될거라는 것을 알리면 안되니까 출제진들이랑 같이 감금시키려나 이왕...
-
메가, 대성에도 없던데
-
개띵곡 추천좀 2
노래들을게 옶어요.
-
입벌려
와...
수능 문제들은 인공지능이 풀 수 있을만큼 정교하고 확실하게 만들어졌다 ㄷㄷ
반도체 ai 주식 지금 긁어모읍시다
ㅋㅌㅋㅋㅋㅋ
![](https://s3.orbi.kr/data/emoticons/dangi/035.png)
배경지식이 많으면 많을수록 치트키이긴하네요이거보고 리트따위 안보기로 결심했다
이거 보고 인공 지능이 되기로 했습니다 감사합니다
존 코너 게이야...
이거 보고 철학과 가기로 했다
배경지식으로 비문학푸는법 ㅇㄷ
chat GPT 공부법 어떠십니까
배경지식(570GB)
어라
어어
이거보고 ai가 되기로 결심했습니다
자, 이제 인강 강사 버리고
챗지피티 공부법 드가자~
올해는 챗지피T 풀커리 타야겠다..
이어폰 챙겨서 들어가기로 했읍니다..
왕...
수능문제는 AI도 틀릴 수 있다 ㄷㄷ..
사실 chat GPT는 생각보다 오류가 많습니다. 질문을 어떻게 하느냐에 따라서 같은 문제에 대해서 다른 답을 말하는 경우가 많습니다.
에이... 인공지능에게 저렇게 배경지식으로만 풀 수 있는 문제를 묻는건 구글에 헤겔에 대해서 질문하는 것과 다를게 없죠ㅠ
놀랍게도 헤겔 문제 뿐만 아니라 거의 대부분의 LEET 언어이해 문제가 인공지능에게는 '배경지식으로만 풀 수 있는 문제'에 해당합니다 ㅎㅎ
그쵸... 그래서 지문을 바탕으로 묻는 문제를 질의시키는게 제일 유의미한거 같아요
현재 단계에서는 문제가 무엇인지 이해하는(것처럼 보이는 것)만으로도 의미가 있는 것 같아요
아직 ChatGPT는 새로운 지식을 추론하고 만드는건 애매하니깐요
와..
선생님 저는 국어문제를 스도쿠풀듯 취미로 풀어보는 평범한 이십대 중반입니다.
리트강사라고 하셨는데, 제가 느끼기에 법학적성시험 2009년것과 2023년이 확 다릅니다. 난이도에서 말이죠.
물론 출제집단이 평가원에서 ~(갑자기 잊어버림..)으로 바뀌긴 했다지만, 어떤 사건들이 있어서 이렇게 확 바뀐걸까요?
단순 출제집단이 바뀌어서? 평가 목적이 달라져서?
2019년을 기점으로 출제기관인 법학전문대학원협의회가 공청회를 진행하고 출제방향을 대거 개편할 것을 공개적으로 천명한 바 있습니다. 2019년 이전과 이후의 LEET(특히 언어이해)는 아예 다른 시험이라고 보아도 무방합니다.
리트는 그러면 최근 시험이 어려운건가요?
선생님은 몇년 리트시험지가 제일 어렵다고 보시나요?
21과 22가 가장 어렵습니다. 가장 최근꺼인 23은 좀 쉬웠구요.