인공지능에게 LEET를 풀게 해 보았다.
안녕하세요. 해커스 로스쿨 LEET 언어이해 이재빈 강사입니다.
요새 chat GPT가 여기저기에서 화제입니다. chat GPT가 미국 의사 면허 시험도 통과했다는 소식에 LEET 언어이해 강사로서 chat GPT가 LEET에서는 몇 점을 맞을 지가 갑자기 궁금해져서 한 번 문제를 풀려보기로 했습니다.
chat GPT에게 글을 읽고 문제를 푸는 훈련을 진행해보자고 제안한 뒤에, 작년에 시행되었던 LEET 언어이해 첫 번 째 지문을 읽게 해 보았습니다.
그만 chat GPT에게 에러가 뜨고 말았습니다. 예상치 못한 결과에 당황했지만 "지문 읽기가 필요 없는 문제를 풀게 해보면 어떨까?"라는 생각이 들어서 LEET 언어이해 문제 중 '윗글을 읽고 답하는 형식'이 아닌 문제를 하나 풀게 해 보았습니다.
2023 LEET 언어이해 22번 문항을 풀게 해 보았습니다. 헤겔 철학과 관련된 지문을 읽고 푸는 문제인데 chat GPT에게는 지문을 제공해 주지 않은 채로 풀게 해 보았습니다.
역시 인공지능답게 지문을 읽지 않고도 배경 지식만으로 문제를 푸는 클라스를 보여주었습니다.
덤으로 제가 자체 모의고사를 위해 제작하고 있는 철학 지문 문제들도 풀게 해 보았는데 모두 정확한 답을 맞추는 클라스를 보여주었습니다.
수능 국어나 언어이해에서 배경지식 공부의 중요성을 확인할 수 있는 지점이었습니다. 인공지능 수준의 배경지식을 갖출 수 있다면 지문을 읽지도 않고 문제를 풀 수 있다는 의미입니다 ㅎㅎ
혹시 헤겔 관련 문제는 배경지식을 적용하기에 너무 용이한 것이 아닌가 싶어 다른 문항들도 풀려 보았는데, 다른 문항들도 대부분 지문을 읽지 않고도 배경지식만을 활용하여 쉽게 풀어내는 것을 확인할 수 있었습니다.
그런데 흥미롭게도 chat GPT가 틀리는 문항도 꽤 있었는데요. (지문을 안 읽고 풀리기는 했지만 ㅎㅎ)
위 문제의 경우 답이 1번인데 5번을 골랐습니다. 5번은 많은 학생들이 골랐던 오답이기도 했는데 인공지능도 똑같은 실수를 범한다는 사실을 확인할 수 있었습니다.
0 XDK (+0)
유익한 글을 읽었다면 작성자에게 XDK를 선물하세요.
-
3등급 받고 싶어요 내년 수능 볼거에요...ㅠ
-
미적분 기준 32점 나옴 3등급 받을수있을려나요...도와주세요 국어 3(현재 0점)...
-
인생 망한듯 3
이제 21살인데 벌써 망한 느낌이 팍 드네 점점 뇌가 멍청해지는 기분이랄까 방향성이...
-
생명 인강으로도 듣는거 어떤가요? 듣는다면 누구 들어야 되나요?
-
ㅈ됐다 0
유튜브 조금 보다가 마음에 드는 노래 있어서 쉴때마다 듣다가 국어 수학 실모 푸는데...
-
대부분은 떠났음. 입시 성공했거나 다른 길을 찾았거나.. 난 왜 아직도 여기 있는...
-
캬 좋다잉
-
작년엔 진짜 좋았는데
-
지인한테 400만원 통수당하고 울며 겨자먹기로 어제부터 물류센터 알바를 나가기로...
-
생윤 질문 1
지금 생윤 빨더텅을 다 풀었는데 남은기간 뭐해야할까요ㅔ 해
-
재생에 효과가 엄청 좋다는데 아직 못써봄
-
어메이징 하겠죠
-
새벽 모고 0
새벽 모고+배 아픔+창문 열어서 추움+안경 지문+유튭 수능 빌런 체험 과연 몇 점 나올지..?
-
홍대는 이름값에 가려진 찐 거품대학이라고 생각함
-
입구가 있어서 들어갔고 출구만 바라보며 정해진 길대로 걸어왔는데 출구가 무너짐...
-
나루토 원피스 0
뭐볼까요
-
장발하고 싶다 0
-
만관부
-
너무 힘들다 0
불안해서 잠이 안온다
-
아 큰일났다 0
왜 잠이 안오지 1시간동안 누웠다 왔음..
-
심심해서 써보는 유분기 많은 민감성 피부였던 나의 수험 생활 피부 케어 루틴 12
1.물 많이 마시기 → 하루에 최소 2L 2.탄산,초콜렛,밀가루 줄이기 → 솔직히...
-
https://youtube.com/shorts/zSPN9fFydkE?si=ccVm0...
-
D-3 2
좀 느낌 다르긴하네 물론 난 수능안침
-
시대인재 단과를 라이브로 들을 예정인데 강기원 쌤은 양 많다던데 김현우쌤 반은...
-
3월에 살때 교재포인트 20만까지 포함으로 82만원 준거 기록에 남아있는데 내년...
-
한마디씩만 충고 부탁해요 술은 권하지 말고
-
영악한애들빼고 순수한애들 많아 ㅠ
-
예비고3 학생인데 미적은 김성호쌤꺼 들을거같습니다 안가람 선생님 공통을 지금...
-
기분이 이상함 0
긴장되는건 아니고 오히려 기대되는데 뭔가 기분이 이상해
-
다들 ㅎㅇㅌ 2
-
누가 더 호감?
-
여기서 다른건 다 알겠는데 ㄹ이 이해가 안되네요... 조사 대상자의 현재 계층과...
-
잠이안와 3
도와줘요
-
기출 도움 많이 받으셨음? 다들 n제 실모만 벅벅 풀길래 좀 궁금하네 그리고...
-
판의 내부에서 일어나는 화산 활동은 차가운 플룸으로 설명할 수 있다 4
판의 내부에서 일어나는 화산 활동은 차가운 플룸으로 설명할 수 있다 이거 틀린거죠?...
-
쫌만더 0
하면 사탐두과목다 만점나올거같은데 제발 제발 제발 "2개월만에 사탐 노베에서...
-
여기서 추천해주실만한 회차 있을까요?! 다 못 풀어볼 거 같아서요,,,ㅠ
-
현역때 긴장 너무해서 잠 한숨도 못자길래 반수할땐 위스키 2잔 마시고 잠 ㅋㅋㅋ...
-
시험떨어졌네 1
왜사냐진짜 ㅅㅂ
-
ㄹㅇ개노베 8등급 이차함수도 지금 배우고있는사람이면 둘중 누구 듣는게 더 좋을까요...
-
5만원 개아깝네 걍 하지말걸
-
고전소설만 존나게 파고 헌대소설은 많이안했는데 미리 안보고가면 난해할만한 지문뭔지...
-
2년동안 수능보느라 5시 이후로만 봤는데 이제 드디어 글 리젠률 구경좀 하겠구만
-
수능꿀팁 3
이시간에 여길 왜들어와있니........... 자라
-
기균 34222 1
화작 확통 생윤사문이면 어느정도가 적정인가요??
-
-
긴장되서 잠이 안오네 ㅆㅃ.
-
수능에서 경제학지문이 나올것으로 예측된다고 하는데 수능완성에서 오류인것 같은 선지가...
-
대신 국어를 망칠 수 있음.
-
그만좀질찔짜야하는데 16
자려고 누우면 맨날 오열하네
와...
수능 문제들은 인공지능이 풀 수 있을만큼 정교하고 확실하게 만들어졌다 ㄷㄷ
반도체 ai 주식 지금 긁어모읍시다
ㅋㅌㅋㅋㅋㅋ
배경지식이 많으면 많을수록 치트키이긴하네요이거보고 리트따위 안보기로 결심했다
이거 보고 인공 지능이 되기로 했습니다 감사합니다
존 코너 게이야...
이거 보고 철학과 가기로 했다
배경지식으로 비문학푸는법 ㅇㄷ
chat GPT 공부법 어떠십니까
배경지식(570GB)
어라
어어
이거보고 ai가 되기로 결심했습니다
자, 이제 인강 강사 버리고
챗지피티 공부법 드가자~
올해는 챗지피T 풀커리 타야겠다..
이어폰 챙겨서 들어가기로 했읍니다..
왕...
수능문제는 AI도 틀릴 수 있다 ㄷㄷ..
사실 chat GPT는 생각보다 오류가 많습니다. 질문을 어떻게 하느냐에 따라서 같은 문제에 대해서 다른 답을 말하는 경우가 많습니다.
에이... 인공지능에게 저렇게 배경지식으로만 풀 수 있는 문제를 묻는건 구글에 헤겔에 대해서 질문하는 것과 다를게 없죠ㅠ
놀랍게도 헤겔 문제 뿐만 아니라 거의 대부분의 LEET 언어이해 문제가 인공지능에게는 '배경지식으로만 풀 수 있는 문제'에 해당합니다 ㅎㅎ
그쵸... 그래서 지문을 바탕으로 묻는 문제를 질의시키는게 제일 유의미한거 같아요
현재 단계에서는 문제가 무엇인지 이해하는(것처럼 보이는 것)만으로도 의미가 있는 것 같아요
아직 ChatGPT는 새로운 지식을 추론하고 만드는건 애매하니깐요
와..
선생님 저는 국어문제를 스도쿠풀듯 취미로 풀어보는 평범한 이십대 중반입니다.
리트강사라고 하셨는데, 제가 느끼기에 법학적성시험 2009년것과 2023년이 확 다릅니다. 난이도에서 말이죠.
물론 출제집단이 평가원에서 ~(갑자기 잊어버림..)으로 바뀌긴 했다지만, 어떤 사건들이 있어서 이렇게 확 바뀐걸까요?
단순 출제집단이 바뀌어서? 평가 목적이 달라져서?
2019년을 기점으로 출제기관인 법학전문대학원협의회가 공청회를 진행하고 출제방향을 대거 개편할 것을 공개적으로 천명한 바 있습니다. 2019년 이전과 이후의 LEET(특히 언어이해)는 아예 다른 시험이라고 보아도 무방합니다.
리트는 그러면 최근 시험이 어려운건가요?
선생님은 몇년 리트시험지가 제일 어렵다고 보시나요?
21과 22가 가장 어렵습니다. 가장 최근꺼인 23은 좀 쉬웠구요.