인공지능에게 LEET를 풀게 해 보았다.
게시글 주소: https://a.orbi.kr/00062055666
안녕하세요. 해커스 로스쿨 LEET 언어이해 이재빈 강사입니다.
요새 chat GPT가 여기저기에서 화제입니다. chat GPT가 미국 의사 면허 시험도 통과했다는 소식에 LEET 언어이해 강사로서 chat GPT가 LEET에서는 몇 점을 맞을 지가 갑자기 궁금해져서 한 번 문제를 풀려보기로 했습니다.
chat GPT에게 글을 읽고 문제를 푸는 훈련을 진행해보자고 제안한 뒤에, 작년에 시행되었던 LEET 언어이해 첫 번 째 지문을 읽게 해 보았습니다.
그만 chat GPT에게 에러가 뜨고 말았습니다. 예상치 못한 결과에 당황했지만 "지문 읽기가 필요 없는 문제를 풀게 해보면 어떨까?"라는 생각이 들어서 LEET 언어이해 문제 중 '윗글을 읽고 답하는 형식'이 아닌 문제를 하나 풀게 해 보았습니다.
2023 LEET 언어이해 22번 문항을 풀게 해 보았습니다. 헤겔 철학과 관련된 지문을 읽고 푸는 문제인데 chat GPT에게는 지문을 제공해 주지 않은 채로 풀게 해 보았습니다.
역시 인공지능답게 지문을 읽지 않고도 배경 지식만으로 문제를 푸는 클라스를 보여주었습니다.
덤으로 제가 자체 모의고사를 위해 제작하고 있는 철학 지문 문제들도 풀게 해 보았는데 모두 정확한 답을 맞추는 클라스를 보여주었습니다.
수능 국어나 언어이해에서 배경지식 공부의 중요성을 확인할 수 있는 지점이었습니다. 인공지능 수준의 배경지식을 갖출 수 있다면 지문을 읽지도 않고 문제를 풀 수 있다는 의미입니다 ㅎㅎ
혹시 헤겔 관련 문제는 배경지식을 적용하기에 너무 용이한 것이 아닌가 싶어 다른 문항들도 풀려 보았는데, 다른 문항들도 대부분 지문을 읽지 않고도 배경지식만을 활용하여 쉽게 풀어내는 것을 확인할 수 있었습니다.
그런데 흥미롭게도 chat GPT가 틀리는 문항도 꽤 있었는데요. (지문을 안 읽고 풀리기는 했지만 ㅎㅎ)
위 문제의 경우 답이 1번인데 5번을 골랐습니다. 5번은 많은 학생들이 골랐던 오답이기도 했는데 인공지능도 똑같은 실수를 범한다는 사실을 확인할 수 있었습니다.
0 XDK (+0)
유익한 글을 읽었다면 작성자에게 XDK를 선물하세요.
-
컴공 있음? 0
1학년 끝난 방학때 뭐함 언어 하나 잡고 디깅해볼까 사프 하기엔 지식이 많이...
-
하고싶은게없으면 1
목표 학과가 딱히 없는 상황인데 이런경우면 사탐하는게낫나요 과탐하는게낫나요??...
-
고등학교입학전까지 공통수학1(수상)문제집 몇권 풀어야될까여 1
공통수학2는 한번 돌렸고 학원에서 수1 선행 나가는데 고딩되기전까지 공통수학1은...
-
이거 ㄹㅇ ㅈ된 것 같다
-
2,3 골고루 섞여야한다고 공부하는게 정배임?
-
중경외시 그리고 이대 표본 어느정도 들어온걸까요... 경희 8,9칸 시립 7,8칸...
-
시급 얼마 받으심? 시급 + 지역 알려주삼
-
추합 질문이요! 0
강원대 배터리융합학과 지역인재 모집인원이 8명인데 제가 예비 5번 이거든요??...
-
수시 설대 2명밖에 안 나왔다네 왜 문과 선배들은 제2외국어를 안 볼걸까
-
서성한 변표 0
서성한계열중에서 과탐이 인문으로 돌리면 유리한점이 있을까요? 생지 선택했습니다...
-
안녕하세요 현재 빅펌에 재직중인 회계사 회계하자입니다. cpa(회계사시험) 관련...
-
밥먹으면서 보다가 넘 귀여워서 몸비틀기해버림 ;;
-
ㅈㄱㄴ 외글은 될것같고 에리카나 광명상가 가구싶어요 ㅠㅠ 가능한가요
-
대학으로 올키 프리미엄 장학 될것 같은데 수강료 10만원 외에 추가되는 요금하면...
-
연수로만 9년이고 시험은 11번 봤다는데 진짠가요?
-
의사들이 탄핵되자마자 25 정시 중단하라고 주장하는 중인데 이게 진짜 될수도...
-
첫 정답자 1000덕 드리겠습니다!
-
. . .
-
제발국민대붙여주세요 제발
-
100명중 23등안에들어야하네. . . 23등하면 낮3, 12등하면 높3
-
7전공 하아 0
죽을 맛이네요 ㅋㅋㅋㅋ... 시험보는 대학생들 힘내시길
-
현재 살고있는집에서 세종대는 30분 에리카는 2시간 걸리는데요 거리가 크게 상관은...
-
아 배고프다 0
주워먹어야지 자급자족
-
예비고3 (고2 모고 올3) 수능 올2 커리와 의견 부탁드립니다 5
중갓반고 내신 3.1인데 충대도 간당간당해서 수능 공부에 몰두를 해보려 합니다....
-
고대 건설환경공학부 (최초합) 성대 공학계열 (예비 받음.. 거의 합격) 유니스트...
-
내등급 6등급에선 평가원것만 공부한다는게 오만할거라는 생각이. . .
-
눈 언제 내려 0
첫눈처럼 왕창 내리면 좋겠다
-
첫 정답자 1000덕 드리겠습니다!
-
이화여대 인식 2
이화여대 인식이 궁금합니다. 입결,어른들 인식,요즘 여대에 대한 인식 등 여러분이...
-
칼럼같은거 하나쓸까 나도 중3때 공부 아얘안하다가 결방학에 벼락치기 ㅈㄴ해서 고1...
-
현재 상황: 능률포카 어원편 2번 돌리긴 했는데 꼼꼼하게 안해서 3분의2 정도만 앎...
-
기하러가 투과목 고르면 지2 많이들 끼고 가는 이유가 있음 본인 성향에 잘맞으면...
-
수능은 항상 대다수의 예측과 반대로 흘러가더라고요 18
23수능: 22수능 여파로 국어는 정말 어렵게 나올거라고 예측했지만 평이국어...
-
새기분커리 질문 3
새기분은 언제 첫강의가 올라오고 마지막강의는 언제 올라오나요. . . 독서,문학 이요. . .
-
독서랑 문학 풀었는데 좀 잘 풀림 ...어휘 문제 틀린 것만 뻬면 말이야 어휘리서...
-
너무 거품 많이끼긴 했어 다만 정상화시키는데 피눈물 흘리는 사람이 너무나 많다는거..
-
동국의 궁금 0
지역교과 대구X 예비 33번인데 가능성있음…? 의대 치대 고대 연대 한양대
-
통과는학원에서 하고 물1은 인강... 예비고1임니다
-
-
올해 무슨 일있나 ..... 교수님들 저한테왜그래요
-
쎈발점 마플시너지 고쟁이 뉴분감 뉴분감 재회독 플랜써 불꽃n제 시즌 1 피지컬...
-
10시간 잤다 0
캬캬
-
서강대변표 경향 1
여기는 물.불 보정 어떤 스타일인가요? 대체로 학교마다 스타일이 있다고, 연대는...
-
재수 생각 있긴 함... 5칸 3칸 7칸 으로 하면 하나는 붙지 않으려나
-
동국대가 끌리긴한데 숭컴은 유명하니깐 ㅇㅇ
-
투표하고 가 4
선호도 조사 ㄱㄱ
-
방학 동안 수1, 수2 알텍이랑 미적분 생질하려고 하는데 병행하는게 좋을까요?...
-
흔들어라 2
흔들어라
-
여기 컴퓨터하기 용이한가욤 들어가서 컴 복전할 거긴 한디
-
침대에서 배고프면 걍 똥 싸서 주워먹으면 되잖아요
와...
수능 문제들은 인공지능이 풀 수 있을만큼 정교하고 확실하게 만들어졌다 ㄷㄷ
반도체 ai 주식 지금 긁어모읍시다
ㅋㅌㅋㅋㅋㅋ
배경지식이 많으면 많을수록 치트키이긴하네요이거보고 리트따위 안보기로 결심했다
이거 보고 인공 지능이 되기로 했습니다 감사합니다
존 코너 게이야...
이거 보고 철학과 가기로 했다
배경지식으로 비문학푸는법 ㅇㄷ
chat GPT 공부법 어떠십니까
배경지식(570GB)
어라
어어
이거보고 ai가 되기로 결심했습니다
자, 이제 인강 강사 버리고
챗지피티 공부법 드가자~
올해는 챗지피T 풀커리 타야겠다..
이어폰 챙겨서 들어가기로 했읍니다..
왕...
수능문제는 AI도 틀릴 수 있다 ㄷㄷ..
사실 chat GPT는 생각보다 오류가 많습니다. 질문을 어떻게 하느냐에 따라서 같은 문제에 대해서 다른 답을 말하는 경우가 많습니다.
에이... 인공지능에게 저렇게 배경지식으로만 풀 수 있는 문제를 묻는건 구글에 헤겔에 대해서 질문하는 것과 다를게 없죠ㅠ
놀랍게도 헤겔 문제 뿐만 아니라 거의 대부분의 LEET 언어이해 문제가 인공지능에게는 '배경지식으로만 풀 수 있는 문제'에 해당합니다 ㅎㅎ
그쵸... 그래서 지문을 바탕으로 묻는 문제를 질의시키는게 제일 유의미한거 같아요
현재 단계에서는 문제가 무엇인지 이해하는(것처럼 보이는 것)만으로도 의미가 있는 것 같아요
아직 ChatGPT는 새로운 지식을 추론하고 만드는건 애매하니깐요
와..
선생님 저는 국어문제를 스도쿠풀듯 취미로 풀어보는 평범한 이십대 중반입니다.
리트강사라고 하셨는데, 제가 느끼기에 법학적성시험 2009년것과 2023년이 확 다릅니다. 난이도에서 말이죠.
물론 출제집단이 평가원에서 ~(갑자기 잊어버림..)으로 바뀌긴 했다지만, 어떤 사건들이 있어서 이렇게 확 바뀐걸까요?
단순 출제집단이 바뀌어서? 평가 목적이 달라져서?
2019년을 기점으로 출제기관인 법학전문대학원협의회가 공청회를 진행하고 출제방향을 대거 개편할 것을 공개적으로 천명한 바 있습니다. 2019년 이전과 이후의 LEET(특히 언어이해)는 아예 다른 시험이라고 보아도 무방합니다.
리트는 그러면 최근 시험이 어려운건가요?
선생님은 몇년 리트시험지가 제일 어렵다고 보시나요?
21과 22가 가장 어렵습니다. 가장 최근꺼인 23은 좀 쉬웠구요.