인공지능에게 LEET를 풀게 해 보았다.
안녕하세요. 해커스 로스쿨 LEET 언어이해 이재빈 강사입니다.
요새 chat GPT가 여기저기에서 화제입니다. chat GPT가 미국 의사 면허 시험도 통과했다는 소식에 LEET 언어이해 강사로서 chat GPT가 LEET에서는 몇 점을 맞을 지가 갑자기 궁금해져서 한 번 문제를 풀려보기로 했습니다.
chat GPT에게 글을 읽고 문제를 푸는 훈련을 진행해보자고 제안한 뒤에, 작년에 시행되었던 LEET 언어이해 첫 번 째 지문을 읽게 해 보았습니다.
그만 chat GPT에게 에러가 뜨고 말았습니다. 예상치 못한 결과에 당황했지만 "지문 읽기가 필요 없는 문제를 풀게 해보면 어떨까?"라는 생각이 들어서 LEET 언어이해 문제 중 '윗글을 읽고 답하는 형식'이 아닌 문제를 하나 풀게 해 보았습니다.
2023 LEET 언어이해 22번 문항을 풀게 해 보았습니다. 헤겔 철학과 관련된 지문을 읽고 푸는 문제인데 chat GPT에게는 지문을 제공해 주지 않은 채로 풀게 해 보았습니다.
역시 인공지능답게 지문을 읽지 않고도 배경 지식만으로 문제를 푸는 클라스를 보여주었습니다.
덤으로 제가 자체 모의고사를 위해 제작하고 있는 철학 지문 문제들도 풀게 해 보았는데 모두 정확한 답을 맞추는 클라스를 보여주었습니다.
수능 국어나 언어이해에서 배경지식 공부의 중요성을 확인할 수 있는 지점이었습니다. 인공지능 수준의 배경지식을 갖출 수 있다면 지문을 읽지도 않고 문제를 풀 수 있다는 의미입니다 ㅎㅎ
혹시 헤겔 관련 문제는 배경지식을 적용하기에 너무 용이한 것이 아닌가 싶어 다른 문항들도 풀려 보았는데, 다른 문항들도 대부분 지문을 읽지 않고도 배경지식만을 활용하여 쉽게 풀어내는 것을 확인할 수 있었습니다.
그런데 흥미롭게도 chat GPT가 틀리는 문항도 꽤 있었는데요. (지문을 안 읽고 풀리기는 했지만 ㅎㅎ)
위 문제의 경우 답이 1번인데 5번을 골랐습니다. 5번은 많은 학생들이 골랐던 오답이기도 했는데 인공지능도 똑같은 실수를 범한다는 사실을 확인할 수 있었습니다.
0 XDK (+0)
유익한 글을 읽었다면 작성자에게 XDK를 선물하세요.
-
윤사 공부하다가헰갈리는 부분이 있어서 질문 올려봅니다! ※ 도덕적 실천이 도덕적...
-
정부 "2025학년도 의대 모집 확정 아냐"…법원에 해명자료 제출 1
정부가 '의대 증원 집행정지 신청'의 항고심 재판부에 "아직 2025학년도...
-
질문 받아봐요 10
사실 질받글 너무 자주올리면 질문 많이 안달리긴하는데 일상 선넘 공부질문 +일본여행질문 다가능!!
-
이제 충청이 개꿀아닌가 거기 의대 할당 엄청 많이하던데
-
직원수 400명정도 되는데 상무 이상급부터는 주6일 필수 근무하라고 했다는데...
-
나 마라탕후루이지영선생니뮤ㅠ형광펜벅벅공스타오늘도수고했따스카이뿌셔담요단인데 질문받는다 5
작수 확통 47 윤리 50임 ㅅㅂ 수학 원래 3컷정도는 나왔는데 수능 진짜 개조짐...
-
만들고나면준킬러나킬러가되어있음
-
세종시가 ㄹㅇ 치트키네 13
대전 충북 충남 지역인재 가능 십
-
안되는 의대가 서울대 고려대 울산대 고신대 말고 더 있나요?
-
스탯티즈 보는데 필딩은 마이너스던데
-
고2 11모가 국수영 241이었음 사람은 그렇게 쉽게 변하지 않더라 저때도 수학...
-
많이 보이는 것 같습니다 이 분야(?) 전문가로서 한 말씀 드리자면 반항할 줄...
-
나는 웨..
-
-
ㅅㅂ 왜 모기 있는데 ㅡㅡ
-
공포에 매수하라 (모든 투자의 책임은 투자하는 본인에게 달려있습니다.)
-
ㅇㅈ해주세요 5
-
문학은 김상훈 들을꺼고 언매는 전형태 할건데 독서 누구할지 추천좀
-
ㅈ반고 내신 2.06~2.13 나오는데 걍 기말 버리고 수능공부 할까요? 한의대...
-
-
국어 일클 독서통&문학통/매일통 Day1~Day2 수학 시발점 확통 부록 Theme...
-
일요일날 하나 하 진짜 ㅈㄴ 힘들당
-
밑천은 누가 대줌?ㅋㅋ ㅋㅋ ㅋㅋ ㅋㅋ ,,,,,,, ㅠㅠ
-
미적분 미적파트 후반부 왜이러노 ㅅㅂ
-
와ㅋㅋ
-
솔직히 열품타 말이예요 14
그룹 들어오고 나서 단 한번도 켠적 없으면 내보내도 되지 않을까요 그냥 둘까요¿
-
수열은 뉴런 시냅스 둘 다 거의 80% 이상 맞는 것 같은데 지수로그 함수에서 걍...
-
이제 고정할때 됏당
-
-
어 동훈아 나와 1
개코랑 같이 있어 지금
-
쫌 그런듯....고려대 철학과 줄여서 고철.....이면 좀 웃길듯.... 연철이라고...
-
천천히 풀어도 돼
-
감독 대타운용 개또라이같이 하네 9회 1사 병살쳐서 멘탈터지고 2군 갔다온 문현빈...
-
윤석열 공약이 정시 확대로 알고 있는데 정시 줄이고 수시늘리는 건 뭔 개지랄임?
-
(3년 동안 생지를 하며) 하지만 올해는 다르다. 물리학2와 지구과학2로 진정한...
-
수잘싶 3
아.
-
레전드기만 7
레전드레전드
-
갈수록 너무 쉬워진다느니 그런 말들이 많았어서 최고난이도는 확실히 낮아진거 같은데...
-
이감 0
존나어렵네
-
국어 이감 기출 0
이감 출제도 선지근거 찾는게 좋을까요
-
모의고사가 6
구깃구깃한 상태로 왔어요
-
작년에 2월부터 4개월 정도 다녔는데 백색소음이랑 분위기가 그립다 ㅋㅋㅋ
-
...
-
“학폭 이력 있으면 0점 처리”…현 고2 학폭 가해자 대입 ‘초비상’ 2
현 고교 2학년이 내년에 치르는 2026학년도 대입에서는 학교폭력 가해 이력이 있는...
-
서울 소재 의대 나와서 지방으로 내려가는 의사가 5%라고 가정하면 1500명 늘리면...
-
스카ㅌㅌ
-
괜히 더 치고 싶어 지잖아(이미 침)
-
선넘질 해주세요 12
아무 질문이나 뻘소리도 ㅇㅇ! 심심하네용
-
오늘 공부 끝 2
더는 못하겠어요!
-
수1 수분감 step 2 까지 어느정도 다 함
와...
수능 문제들은 인공지능이 풀 수 있을만큼 정교하고 확실하게 만들어졌다 ㄷㄷ
반도체 ai 주식 지금 긁어모읍시다
ㅋㅌㅋㅋㅋㅋ
배경지식이 많으면 많을수록 치트키이긴하네요이거보고 리트따위 안보기로 결심했다
이거 보고 인공 지능이 되기로 했습니다 감사합니다
존 코너 게이야...
이거 보고 철학과 가기로 했다
배경지식으로 비문학푸는법 ㅇㄷ
chat GPT 공부법 어떠십니까
배경지식(570GB)
어라
어어
이거보고 ai가 되기로 결심했습니다
자, 이제 인강 강사 버리고
챗지피티 공부법 드가자~
올해는 챗지피T 풀커리 타야겠다..
이어폰 챙겨서 들어가기로 했읍니다..
왕...
수능문제는 AI도 틀릴 수 있다 ㄷㄷ..
사실 chat GPT는 생각보다 오류가 많습니다. 질문을 어떻게 하느냐에 따라서 같은 문제에 대해서 다른 답을 말하는 경우가 많습니다.
에이... 인공지능에게 저렇게 배경지식으로만 풀 수 있는 문제를 묻는건 구글에 헤겔에 대해서 질문하는 것과 다를게 없죠ㅠ
놀랍게도 헤겔 문제 뿐만 아니라 거의 대부분의 LEET 언어이해 문제가 인공지능에게는 '배경지식으로만 풀 수 있는 문제'에 해당합니다 ㅎㅎ
그쵸... 그래서 지문을 바탕으로 묻는 문제를 질의시키는게 제일 유의미한거 같아요
현재 단계에서는 문제가 무엇인지 이해하는(것처럼 보이는 것)만으로도 의미가 있는 것 같아요
아직 ChatGPT는 새로운 지식을 추론하고 만드는건 애매하니깐요
와..
선생님 저는 국어문제를 스도쿠풀듯 취미로 풀어보는 평범한 이십대 중반입니다.
리트강사라고 하셨는데, 제가 느끼기에 법학적성시험 2009년것과 2023년이 확 다릅니다. 난이도에서 말이죠.
물론 출제집단이 평가원에서 ~(갑자기 잊어버림..)으로 바뀌긴 했다지만, 어떤 사건들이 있어서 이렇게 확 바뀐걸까요?
단순 출제집단이 바뀌어서? 평가 목적이 달라져서?
2019년을 기점으로 출제기관인 법학전문대학원협의회가 공청회를 진행하고 출제방향을 대거 개편할 것을 공개적으로 천명한 바 있습니다. 2019년 이전과 이후의 LEET(특히 언어이해)는 아예 다른 시험이라고 보아도 무방합니다.
리트는 그러면 최근 시험이 어려운건가요?
선생님은 몇년 리트시험지가 제일 어렵다고 보시나요?
21과 22가 가장 어렵습니다. 가장 최근꺼인 23은 좀 쉬웠구요.