인공지능에게 LEET를 풀게 해 보았다.
게시글 주소: https://a.orbi.kr/00062055666
안녕하세요. 해커스 로스쿨 LEET 언어이해 이재빈 강사입니다.
요새 chat GPT가 여기저기에서 화제입니다. chat GPT가 미국 의사 면허 시험도 통과했다는 소식에 LEET 언어이해 강사로서 chat GPT가 LEET에서는 몇 점을 맞을 지가 갑자기 궁금해져서 한 번 문제를 풀려보기로 했습니다.
chat GPT에게 글을 읽고 문제를 푸는 훈련을 진행해보자고 제안한 뒤에, 작년에 시행되었던 LEET 언어이해 첫 번 째 지문을 읽게 해 보았습니다.
그만 chat GPT에게 에러가 뜨고 말았습니다. 예상치 못한 결과에 당황했지만 "지문 읽기가 필요 없는 문제를 풀게 해보면 어떨까?"라는 생각이 들어서 LEET 언어이해 문제 중 '윗글을 읽고 답하는 형식'이 아닌 문제를 하나 풀게 해 보았습니다.
2023 LEET 언어이해 22번 문항을 풀게 해 보았습니다. 헤겔 철학과 관련된 지문을 읽고 푸는 문제인데 chat GPT에게는 지문을 제공해 주지 않은 채로 풀게 해 보았습니다.
역시 인공지능답게 지문을 읽지 않고도 배경 지식만으로 문제를 푸는 클라스를 보여주었습니다.
덤으로 제가 자체 모의고사를 위해 제작하고 있는 철학 지문 문제들도 풀게 해 보았는데 모두 정확한 답을 맞추는 클라스를 보여주었습니다.
수능 국어나 언어이해에서 배경지식 공부의 중요성을 확인할 수 있는 지점이었습니다. 인공지능 수준의 배경지식을 갖출 수 있다면 지문을 읽지도 않고 문제를 풀 수 있다는 의미입니다 ㅎㅎ
혹시 헤겔 관련 문제는 배경지식을 적용하기에 너무 용이한 것이 아닌가 싶어 다른 문항들도 풀려 보았는데, 다른 문항들도 대부분 지문을 읽지 않고도 배경지식만을 활용하여 쉽게 풀어내는 것을 확인할 수 있었습니다.
그런데 흥미롭게도 chat GPT가 틀리는 문항도 꽤 있었는데요. (지문을 안 읽고 풀리기는 했지만 ㅎㅎ)
위 문제의 경우 답이 1번인데 5번을 골랐습니다. 5번은 많은 학생들이 골랐던 오답이기도 했는데 인공지능도 똑같은 실수를 범한다는 사실을 확인할 수 있었습니다.
0 XDK (+0)
유익한 글을 읽었다면 작성자에게 XDK를 선물하세요.
-
연대 의대나 주요대 메디컬같은 경우는 두개받을 수 있잖아요 이런식으로 6-7개 받을 수도 있나요?
-
어쩐지 글이 안 읽히더라
-
약대까진 안바래 실력도안되고... 경북대 가고싶어
-
내일을 노려야지
-
부산대 화학교육과랑 부경대 융합반도체 둘다 붙으면 어디쓰는게 나을까요..? 부경대는...
-
깨알상식 3
혀를 내민 상태로 눈을 위로 뜰 수 없다
-
제가 딱 동생이 보기좋은 라이트한것만 엄선해서 알려줬는데 언제부턴가 얘가 스스로...
-
아 왜케 추워 0
이불속에있다 화장실갔다왔는데 추워서 까마귀됨
-
설의 형님들이 상주하고 계신데 어딜 감히 우리같은 잡@놈들이
-
뱃지확인용 3
ㅇ..ㅇ
-
이화여대 합격생을 위한 노크선배 꿀팁 [이화여대25][축제 모음집] 0
대학커뮤니티 노크에서 선발한 이화여대 선배가 오르비에 있는 예비 이화여대학생,...
-
와 어떡해 2
내일 과외임 헐 진짜 어떡해 내가 쌤인데 더 긴장하고 있네ㅠ
-
머리카락 거지존 10
무럭무럭 자라라
-
문제 풀때 0
-
-
에어팟 프로 0
세탁기에 같이 돌렸는데 하루지나니까 정상작동되네 ㅋㅋ
-
지금부터라도 써야지
-
생윤 7
국어 잘 하면 유리하다는데 2411 백99, 2511 백 98이면 다른 사탐보다...
-
공부 커리 공부법 이런거 머리속에 다 저장돼있고 고3 시작시점으로 돌아간다면...
-
레그프레스 인아웃타이 모시기모시기등등 깔짝대고옴 다들 체력근력 길러 건승합시다,
-
난 죽는건 상관없는데 사후세계가 있으면 지옥갈까봐 무서움..
-
헤어지면대참사라는걸알면서하는거잖아 그게낭만있는거지 도전~
-
온세상이 강평 0
올오카 듣는 강평임
-
이탈리아어랑 스페인어가 자꾸 날 유혹하는데
-
생강에일 2
마시고나면 목구멍이 타요
-
세상차 빠르네
-
부산대 세종대 둘다 물리쪽으로 갈껀데 어디가더 유망한가요
-
ㅇㅈ 0
-
기출 공부를 할 때 10
모의고사 단위로 공부하는 거 어떻게 생각함? 난 과탐 공부 그렇게 했었는데...
-
6월전에 몰아 올림 ㅇㅇㅇ
-
최초합했는데 0
님들 대학 최초합했고 갈 학교 정해졌고 통학할건데 등록금만 기간내에 납부하면...
-
정치 얘기를 하려는건 아닌데 출산율때문에 100년이면 자연소멸하게 생겼고 자살율은...
-
과외 4
2.5로 하는데 뭔가 잘못된 것 같음
-
스와힐리어 << 배워보셈 강의 자료랑 문제들도 전부 한국외대 온라인에서 무료로...
-
끝!! 4
끝!!
-
배 ㅈㄴ땡기네 7
누워서 일어나기도 힘들어 그래도 가야겠지 에효
-
이미지 미친개념 듣다가 현유진 뉴런으로 옮기면 충돌 생기나요? 상관 없나요?
-
아파도 11
안녕
-
나만 그런건가 뭔가 루틴도 딱딱 잡히고 좋음
-
CPA나 변리사, 관세사 1차 시험 합격하시면 됩니다. 예전에는 사법시험,...
-
그건 저구요 화학 문제집 n제 추천좀 작년에 김준 풀커리 타고 수능 2받음 n제 추천 좀
-
대학가기 전날에
-
선준은 계속 퍼블 당하고 너넨 져라
-
고자전 뚫렸네 6
현재 확인된 추합 11개 여기서 이제 정외 401.3, 첨융 405.5 cc빔 안...
-
화2 시작할건데 3
화학 쌩노베이스에서 하방30점 확보하는데 시간 얼마나 걸릴까요?
-
추합 덜돔??
-
[고려대학교 25학번 합격] 합격자를 위한 고려대 25 단톡방을 소개합니다. 0
고려대 25학번 합격자를 위한 고려대 클루x노크 오픈채팅방을 소개합니다. 24학번...
-
설경 합격한 본인 근황 24
시골바닥출신이라 이런것도붙음ㅋㅋㅋㅋㅋㅋㅋ
-
그게잘안대네
-
몇몇 공대 제외 대부분 공대가 설캠 상경한테 따이는게 현실인데 이과대>공대인거까지...
-
신분세탁하고싶 한국보다 인프라 좋은나라가 없는거 같은데 그나마 일본이 비슷하긴 한듯
와...
수능 문제들은 인공지능이 풀 수 있을만큼 정교하고 확실하게 만들어졌다 ㄷㄷ
반도체 ai 주식 지금 긁어모읍시다
ㅋㅌㅋㅋㅋㅋ
배경지식이 많으면 많을수록 치트키이긴하네요이거보고 리트따위 안보기로 결심했다
이거 보고 인공 지능이 되기로 했습니다 감사합니다
존 코너 게이야...
이거 보고 철학과 가기로 했다
배경지식으로 비문학푸는법 ㅇㄷ
chat GPT 공부법 어떠십니까
배경지식(570GB)
어라
어어
이거보고 ai가 되기로 결심했습니다
자, 이제 인강 강사 버리고
챗지피티 공부법 드가자~
올해는 챗지피T 풀커리 타야겠다..
이어폰 챙겨서 들어가기로 했읍니다..
왕...
수능문제는 AI도 틀릴 수 있다 ㄷㄷ..
사실 chat GPT는 생각보다 오류가 많습니다. 질문을 어떻게 하느냐에 따라서 같은 문제에 대해서 다른 답을 말하는 경우가 많습니다.
에이... 인공지능에게 저렇게 배경지식으로만 풀 수 있는 문제를 묻는건 구글에 헤겔에 대해서 질문하는 것과 다를게 없죠ㅠ
놀랍게도 헤겔 문제 뿐만 아니라 거의 대부분의 LEET 언어이해 문제가 인공지능에게는 '배경지식으로만 풀 수 있는 문제'에 해당합니다 ㅎㅎ
그쵸... 그래서 지문을 바탕으로 묻는 문제를 질의시키는게 제일 유의미한거 같아요
현재 단계에서는 문제가 무엇인지 이해하는(것처럼 보이는 것)만으로도 의미가 있는 것 같아요
아직 ChatGPT는 새로운 지식을 추론하고 만드는건 애매하니깐요
와..
선생님 저는 국어문제를 스도쿠풀듯 취미로 풀어보는 평범한 이십대 중반입니다.
리트강사라고 하셨는데, 제가 느끼기에 법학적성시험 2009년것과 2023년이 확 다릅니다. 난이도에서 말이죠.
물론 출제집단이 평가원에서 ~(갑자기 잊어버림..)으로 바뀌긴 했다지만, 어떤 사건들이 있어서 이렇게 확 바뀐걸까요?
단순 출제집단이 바뀌어서? 평가 목적이 달라져서?
2019년을 기점으로 출제기관인 법학전문대학원협의회가 공청회를 진행하고 출제방향을 대거 개편할 것을 공개적으로 천명한 바 있습니다. 2019년 이전과 이후의 LEET(특히 언어이해)는 아예 다른 시험이라고 보아도 무방합니다.
리트는 그러면 최근 시험이 어려운건가요?
선생님은 몇년 리트시험지가 제일 어렵다고 보시나요?
21과 22가 가장 어렵습니다. 가장 최근꺼인 23은 좀 쉬웠구요.