인공지능에게 LEET를 풀게 해 보았다.
게시글 주소: https://i.orbi.kr/00062055666
안녕하세요. 해커스 로스쿨 LEET 언어이해 이재빈 강사입니다.
요새 chat GPT가 여기저기에서 화제입니다. chat GPT가 미국 의사 면허 시험도 통과했다는 소식에 LEET 언어이해 강사로서 chat GPT가 LEET에서는 몇 점을 맞을 지가 갑자기 궁금해져서 한 번 문제를 풀려보기로 했습니다.
chat GPT에게 글을 읽고 문제를 푸는 훈련을 진행해보자고 제안한 뒤에, 작년에 시행되었던 LEET 언어이해 첫 번 째 지문을 읽게 해 보았습니다.
그만 chat GPT에게 에러가 뜨고 말았습니다. 예상치 못한 결과에 당황했지만 "지문 읽기가 필요 없는 문제를 풀게 해보면 어떨까?"라는 생각이 들어서 LEET 언어이해 문제 중 '윗글을 읽고 답하는 형식'이 아닌 문제를 하나 풀게 해 보았습니다.
2023 LEET 언어이해 22번 문항을 풀게 해 보았습니다. 헤겔 철학과 관련된 지문을 읽고 푸는 문제인데 chat GPT에게는 지문을 제공해 주지 않은 채로 풀게 해 보았습니다.
역시 인공지능답게 지문을 읽지 않고도 배경 지식만으로 문제를 푸는 클라스를 보여주었습니다.
덤으로 제가 자체 모의고사를 위해 제작하고 있는 철학 지문 문제들도 풀게 해 보았는데 모두 정확한 답을 맞추는 클라스를 보여주었습니다.
수능 국어나 언어이해에서 배경지식 공부의 중요성을 확인할 수 있는 지점이었습니다. 인공지능 수준의 배경지식을 갖출 수 있다면 지문을 읽지도 않고 문제를 풀 수 있다는 의미입니다 ㅎㅎ
혹시 헤겔 관련 문제는 배경지식을 적용하기에 너무 용이한 것이 아닌가 싶어 다른 문항들도 풀려 보았는데, 다른 문항들도 대부분 지문을 읽지 않고도 배경지식만을 활용하여 쉽게 풀어내는 것을 확인할 수 있었습니다.
그런데 흥미롭게도 chat GPT가 틀리는 문항도 꽤 있었는데요. (지문을 안 읽고 풀리기는 했지만 ㅎㅎ)
위 문제의 경우 답이 1번인데 5번을 골랐습니다. 5번은 많은 학생들이 골랐던 오답이기도 했는데 인공지능도 똑같은 실수를 범한다는 사실을 확인할 수 있었습니다.
0 XDK (+0)
유익한 글을 읽었다면 작성자에게 XDK를 선물하세요.
-
홋카이도 항공권 예약함 13
1월인데 싸게 구한듯
-
연논 4번 유출 문제 교과 내에서 풀리는 문제는 맞음? 7
사실 푸는 거야 걍 풀면 되는데 아무리 대가리를 굴려봐도 테일러 다항식에서 착안해서...
-
불쾌에서 쾌를 유도하는 문제라 생각하며 푸는중이긴한데 좃같네걍
-
한국인들 흉기 기아 독삼사 이렇게 많이들타는데 혼다 도요타도 가끔은 보이는듯
-
시간 지난것은 별점이 무슨 다 5개야 ㅋㅋ 최신꺼는 게시해도 금방 삭제하는것같고
-
이매진이 작년 상상모고로 만든거니깐 작년 모의고사를 떠올려보면 그냥 무난무난했었음...
-
연논 신소재 2
1,3-1,4-1,4-2,5-1,5-2 서술 완벽하게 했고 6-1 평행하니까 코사인...
-
ㅈㄴ 스트레스 받네 집에서 고기나 먹어야지. 소고기 먹방 ㄱㄱ혓
-
고능아이고 싶다 2
기구하다
-
예전에 거래하던 애는 1주일씩 발송을 안 해서 그냥 차단 박앗는데 이번엔 직거래라 괜찮을듯
-
뭔가 그냥 평가원풀듯이 대충 기억나는대로하거나 추론으로 해결하려하면 글 안에...
-
아 또 나만 체감 난이도 10회 어게인 찍고있었지 오엠알 내면서 엉엉울고싶엇는데 ㅠㅠ
-
영어 독해할때 3
어떰? 난 원래 후자였는데 최근들어 전자로 바꿀지 고민중임 지금까지 다 1뜨긴했음
-
조사 종류를 어떻게 해야할지 모르겠어요.. "은 는 도 만 까지 부터 조차 요"가...
-
특정 지문은 문장이 머리 속에 이미지로 남으면 이해가 되는데, 예를 들어,...
-
언제 기출 연계다, 뭐랑 아이디어가 비슷하다면서 별별 기출 다 나오는데 정작 제일...
-
심심할 새가 없음 하루가 바쁨
-
눈물나올거같음
-
학교에서 시간 뺏기는 것도 있지만 집중력 이슈로 평일에 세 시간 정도밖에... 빨리...
-
설혹 넘어 태양가까이 히!~~~ 였음,,,,
-
널 갖겠다
-
도서관에서 1시간 수면을... 전공책 표지에 침까지 흘리면서 푹 자 버렸네 유광코팅...
-
제 마음에… 안착 S2
-
중간 망하고 정시&사탐런 할려고 내일부터 생윤 공부 할라고 합니다. 저희 학교는...
-
화작 풀게 없네 8
이감 상상n제 기출 이거말고 더 업나..
-
변곡점 확인 5
변곡점 은 f''(a)=0 과 f"이 a 의 양옆에서 부호가 바뀌어야한다잖아요...
-
간단한 확통 문제입니다 난이도 :2/5
-
어디감?
-
너무 조건화 되었지만 결혼은 진짜 같이 있으면 행복한 사람이랑 해야함
-
(x-1)/(e^x+x) 세달에 한번정도 보는듯한데 볼 때마다 시간 개마니잡아먹음
-
ㅈㄱㄴ
-
2015년 KS 1차전 (2015.10.26) 이후 3,275일 만의 가을야구 승리...
-
WHY?는 결과에 대한 원인을 묻는건데 결과와 원인을 한데묶어 하나의 집합이라는...
-
수시최저러인데 탐구 상위 한과목이라 사문만함 사문은 1고정 근데 딱 한대학만 탐구...
-
내 옆자리 시험 시작하자마자 우다다다 뭘 ㅈㄴ 빨리 적더라 다들 문제 읽어야할...
-
올해는 다들 열심히하시네..
-
주마등 공부법 1
나 고딩때도 들어본 말
-
롯데팬 일동은 삼성의 승리를 응원합니다. 그러니까 공동우승이나 시켜주세요 아잉
-
그것은 바로 ”1페이지 초필살 지엽“ 모르면 물스퍼거도 걍 틀리는거임 이건 ㅋㅋ...
-
분컷 50점 명성만 보면 지옥에서 올라온 모의고사인데 사만다나 강k가 훨씬...
-
제발붙여주면안되겠니내가이번엔갈게..
-
저만 어렵나요..? 평가원 교육청 기출 매번 다 맞거나 취약한 기후 트에서 한 문제...
-
아수라 올해 1
뭔가... '그 폼'이 안나오는 느낌인데 흠 제작년에 진짜 절정의감각 심어줬었는데...
-
이걸로 정보를 연결하고 그 정보연결이 이루는 경로가 목표에 도달하면 그 경로상의 것들을 실행한다
-
이거 그냥 저처럼 저렇게 수식 조작해서 풀어도 괜찮은건가요,,? 답지에 계산이 너무...
-
오오오 오 오오오오오
-
몬스터의 힘은 대단하단거임
와...
수능 문제들은 인공지능이 풀 수 있을만큼 정교하고 확실하게 만들어졌다 ㄷㄷ
반도체 ai 주식 지금 긁어모읍시다
ㅋㅌㅋㅋㅋㅋ
이거보고 리트따위 안보기로 결심했다
이거 보고 인공 지능이 되기로 했습니다 감사합니다
존 코너 게이야...
이거 보고 철학과 가기로 했다
배경지식으로 비문학푸는법 ㅇㄷ
chat GPT 공부법 어떠십니까
배경지식(570GB)
어라
어어
이거보고 ai가 되기로 결심했습니다
자, 이제 인강 강사 버리고
챗지피티 공부법 드가자~
올해는 챗지피T 풀커리 타야겠다..
이어폰 챙겨서 들어가기로 했읍니다..
왕...
수능문제는 AI도 틀릴 수 있다 ㄷㄷ..
사실 chat GPT는 생각보다 오류가 많습니다. 질문을 어떻게 하느냐에 따라서 같은 문제에 대해서 다른 답을 말하는 경우가 많습니다.
에이... 인공지능에게 저렇게 배경지식으로만 풀 수 있는 문제를 묻는건 구글에 헤겔에 대해서 질문하는 것과 다를게 없죠ㅠ
놀랍게도 헤겔 문제 뿐만 아니라 거의 대부분의 LEET 언어이해 문제가 인공지능에게는 '배경지식으로만 풀 수 있는 문제'에 해당합니다 ㅎㅎ
그쵸... 그래서 지문을 바탕으로 묻는 문제를 질의시키는게 제일 유의미한거 같아요
현재 단계에서는 문제가 무엇인지 이해하는(것처럼 보이는 것)만으로도 의미가 있는 것 같아요
아직 ChatGPT는 새로운 지식을 추론하고 만드는건 애매하니깐요
와..
선생님 저는 국어문제를 스도쿠풀듯 취미로 풀어보는 평범한 이십대 중반입니다.
리트강사라고 하셨는데, 제가 느끼기에 법학적성시험 2009년것과 2023년이 확 다릅니다. 난이도에서 말이죠.
물론 출제집단이 평가원에서 ~(갑자기 잊어버림..)으로 바뀌긴 했다지만, 어떤 사건들이 있어서 이렇게 확 바뀐걸까요?
단순 출제집단이 바뀌어서? 평가 목적이 달라져서?
2019년을 기점으로 출제기관인 법학전문대학원협의회가 공청회를 진행하고 출제방향을 대거 개편할 것을 공개적으로 천명한 바 있습니다. 2019년 이전과 이후의 LEET(특히 언어이해)는 아예 다른 시험이라고 보아도 무방합니다.
리트는 그러면 최근 시험이 어려운건가요?
선생님은 몇년 리트시험지가 제일 어렵다고 보시나요?
21과 22가 가장 어렵습니다. 가장 최근꺼인 23은 좀 쉬웠구요.