인공지능에게 LEET를 풀게 해 보았다.
안녕하세요. 해커스 로스쿨 LEET 언어이해 이재빈 강사입니다.
요새 chat GPT가 여기저기에서 화제입니다. chat GPT가 미국 의사 면허 시험도 통과했다는 소식에 LEET 언어이해 강사로서 chat GPT가 LEET에서는 몇 점을 맞을 지가 갑자기 궁금해져서 한 번 문제를 풀려보기로 했습니다.
chat GPT에게 글을 읽고 문제를 푸는 훈련을 진행해보자고 제안한 뒤에, 작년에 시행되었던 LEET 언어이해 첫 번 째 지문을 읽게 해 보았습니다.
그만 chat GPT에게 에러가 뜨고 말았습니다. 예상치 못한 결과에 당황했지만 "지문 읽기가 필요 없는 문제를 풀게 해보면 어떨까?"라는 생각이 들어서 LEET 언어이해 문제 중 '윗글을 읽고 답하는 형식'이 아닌 문제를 하나 풀게 해 보았습니다.
2023 LEET 언어이해 22번 문항을 풀게 해 보았습니다. 헤겔 철학과 관련된 지문을 읽고 푸는 문제인데 chat GPT에게는 지문을 제공해 주지 않은 채로 풀게 해 보았습니다.
역시 인공지능답게 지문을 읽지 않고도 배경 지식만으로 문제를 푸는 클라스를 보여주었습니다.
덤으로 제가 자체 모의고사를 위해 제작하고 있는 철학 지문 문제들도 풀게 해 보았는데 모두 정확한 답을 맞추는 클라스를 보여주었습니다.
수능 국어나 언어이해에서 배경지식 공부의 중요성을 확인할 수 있는 지점이었습니다. 인공지능 수준의 배경지식을 갖출 수 있다면 지문을 읽지도 않고 문제를 풀 수 있다는 의미입니다 ㅎㅎ
혹시 헤겔 관련 문제는 배경지식을 적용하기에 너무 용이한 것이 아닌가 싶어 다른 문항들도 풀려 보았는데, 다른 문항들도 대부분 지문을 읽지 않고도 배경지식만을 활용하여 쉽게 풀어내는 것을 확인할 수 있었습니다.
그런데 흥미롭게도 chat GPT가 틀리는 문항도 꽤 있었는데요. (지문을 안 읽고 풀리기는 했지만 ㅎㅎ)
위 문제의 경우 답이 1번인데 5번을 골랐습니다. 5번은 많은 학생들이 골랐던 오답이기도 했는데 인공지능도 똑같은 실수를 범한다는 사실을 확인할 수 있었습니다.
0 XDK (+0)
유익한 글을 읽었다면 작성자에게 XDK를 선물하세요.
-
수완 특 0
널찍하고 착한 느낌의 내지 디자인때문에 뭔가 문제가 쉬워보이고 맘이 편해짐 문제...
-
둘 중 누굴 들어야하지
-
큐브 풍년이네 0
77ㅓ억 달다
-
해설에 f'(x)는 x>0인 구간에서 증가함수, x<0인 구간에서 감소함수여서 x와...
-
재수강 하겟다고 걍
-
생각보다 수업하는게 재밌음 무료인데 재밌는거면 천직인가
-
7월 13000원 8월 14000원 9월 15000원 이렇게ㅣ 쭉 시급 이리 올려주신다함
-
190920 물1
-
너무 좋구만
-
김승리 올오카 있었는데 죄다 번장에 박아버림 다른거 안듣고 여기서 푸는 방식만...
-
나도 내가 그냥 대단하고 벅차고 가슴이 울림
-
정시 5
121 152 2등급 68 69면 어느정도 가나요??...요번 6모인뎀
-
6모 수학 3컷 통통이인데.. 수특수완 풀어도 될까요..?! 11
엔제 풀기 전에 풀고 치우고 싶어서요.. 아니면 수특수완 대신 다른걸 하는게...
-
나 끌고가면 전력약화라니까 그러네 하..
-
수학 예전 문과 범위는 잘 모르기도 하고 이과범위도 기억 가물가물하네요 이투스 패스...
-
지금까지 시발점 회독 + 미친개념 2회독+ 4점초반까지 기출 + n티켓 중간정도까지...
-
왓다 갓다 하는데 왕복 2시간 반~ 3시간 걸림 토욜만 단과 다닐 생각인데 시간...
-
단과같은거 처음 들어보는데 설렌다
-
지1 장인 ㄱ 4
누가 맞음?
-
안녕하세요 ! 수학의 왕도(하) 30p의 종합문제 실력편 , 고득점 문제 3번문제...
-
동생이랑 같은 학번ㅋㅎㅋㅎㅋㅎ ㅈㄴ웃기네….
-
미숙하더라도 1
많이 미숙하더라도 낭만있고 재밌었던 때가 그립다.. 그 때는 길 가다 노을만 봐도...
-
현 상향평준화의 시대 한 시대를 풍미했던 5년전 수능은 이제 물로켓이 되어버린건가
-
0도에서 얼고 100도에서 끓는 게 참 신기함
-
알림은 통화중이라고 5~10분 후 다시 시도해달라고 뜨는데 발송완료라 떠 있네요 이러면 된건가요?
-
영어 가렸는데 5등급입니다..
-
엄….ㅠ 4규도 막히는거 딱히 없었는데 그냥 빅포텐 할까여
-
엄마한텐 비밀로 해야겠다
-
말이 됨? 제 동생 이야기임… 생 42점, 지 11점 받았다는데…. 어지럽네…아무리...
-
큰일이다 2
하고싶은일이 없어 대학은왜갔담
-
독서 문법 해설까지 ㄷ ㄷ 홀수ㅜ기출도 주고 n제도 주고 뭐 다 주네
-
올해 수능 볼 거라 시간이 좀 부족한 상태인데요 물1 김성재 선생님 기타업 들으면...
-
오늘 오전에 보냈는데 안 오네요ㅠㅠㅜ 발송 완료 떴는데 원래 이렇게 오래 걸리나용??
-
스카가서 공부할라고 집 가는 중이였는데요 할아버지가 저보고 수능 공부 하냐는거에요...
-
아니 벌레 너무많다 11
이래서 여름이 싫어
-
다들 뭐해요 8
놀아주세요
-
누가 더 잘함? 1
작수 연계(독서,문학)빨 받고 백분위 87 표점 123 6평 연계0 백분위 87...
-
공부하기싫다 7
ㅠㅠ
-
아이돌은 극한직업이 맞다.
-
1등급의 희망이 (ㅈ~ㄴ)어렴풋하게 보이는거같기도한거같기도하네...
-
텔그 이거맞음? 2
이게 왜 됨? 나 진짜 대학교 갈 수 있는거야?
-
저게시발뭔데 3년차라니
-
어그로 킄킄 다리 떠는거까진 뭐 괜찮다 생각함 다리 안떨면 불안하고 답답하고 다리...
-
슬슬 돌아 올 때 됐잖아 누나...프미나도 돌아오는데
-
나만 안 가고 반수한다고 기웃대는게 불안불안하네요
-
삼일연속치킨먹기 2
어제 저녁은 치킨을 시켜먹었지 오늘 저녁도 남은 치킨을 데워먹었지 하지만 아직도...
-
떳ㄷㅏ 내 야동 5
범준쌤 너무 그리웠어요ㅜㅠ
-
ㄹㅇ루 너무내스타일
-
인서울 중위권 학교 다녀요 자산운용사나 pef 목표로 하는 취준생입니당 1년에...
-
10m 비단뱀 배 속서 다섯아이 엄마 숨진 채 발견…"아이 약 사러 가던 길" 1
(서울=뉴스1) 조소영 기자 = 인도네시아에서 한 30대 여성이 10m 길이...
와...
수능 문제들은 인공지능이 풀 수 있을만큼 정교하고 확실하게 만들어졌다 ㄷㄷ
반도체 ai 주식 지금 긁어모읍시다
ㅋㅌㅋㅋㅋㅋ
![](https://s3.orbi.kr/data/emoticons/dangi/035.png)
배경지식이 많으면 많을수록 치트키이긴하네요이거보고 리트따위 안보기로 결심했다
이거 보고 인공 지능이 되기로 했습니다 감사합니다
존 코너 게이야...
이거 보고 철학과 가기로 했다
배경지식으로 비문학푸는법 ㅇㄷ
chat GPT 공부법 어떠십니까
배경지식(570GB)
어라
어어
이거보고 ai가 되기로 결심했습니다
자, 이제 인강 강사 버리고
챗지피티 공부법 드가자~
올해는 챗지피T 풀커리 타야겠다..
이어폰 챙겨서 들어가기로 했읍니다..
왕...
수능문제는 AI도 틀릴 수 있다 ㄷㄷ..
사실 chat GPT는 생각보다 오류가 많습니다. 질문을 어떻게 하느냐에 따라서 같은 문제에 대해서 다른 답을 말하는 경우가 많습니다.
에이... 인공지능에게 저렇게 배경지식으로만 풀 수 있는 문제를 묻는건 구글에 헤겔에 대해서 질문하는 것과 다를게 없죠ㅠ
놀랍게도 헤겔 문제 뿐만 아니라 거의 대부분의 LEET 언어이해 문제가 인공지능에게는 '배경지식으로만 풀 수 있는 문제'에 해당합니다 ㅎㅎ
그쵸... 그래서 지문을 바탕으로 묻는 문제를 질의시키는게 제일 유의미한거 같아요
현재 단계에서는 문제가 무엇인지 이해하는(것처럼 보이는 것)만으로도 의미가 있는 것 같아요
아직 ChatGPT는 새로운 지식을 추론하고 만드는건 애매하니깐요
와..
선생님 저는 국어문제를 스도쿠풀듯 취미로 풀어보는 평범한 이십대 중반입니다.
리트강사라고 하셨는데, 제가 느끼기에 법학적성시험 2009년것과 2023년이 확 다릅니다. 난이도에서 말이죠.
물론 출제집단이 평가원에서 ~(갑자기 잊어버림..)으로 바뀌긴 했다지만, 어떤 사건들이 있어서 이렇게 확 바뀐걸까요?
단순 출제집단이 바뀌어서? 평가 목적이 달라져서?
2019년을 기점으로 출제기관인 법학전문대학원협의회가 공청회를 진행하고 출제방향을 대거 개편할 것을 공개적으로 천명한 바 있습니다. 2019년 이전과 이후의 LEET(특히 언어이해)는 아예 다른 시험이라고 보아도 무방합니다.
리트는 그러면 최근 시험이 어려운건가요?
선생님은 몇년 리트시험지가 제일 어렵다고 보시나요?
21과 22가 가장 어렵습니다. 가장 최근꺼인 23은 좀 쉬웠구요.