인공지능에게 LEET를 풀게 해 보았다.
게시글 주소: https://ui.orbi.kr/00062055666
안녕하세요. 해커스 로스쿨 LEET 언어이해 이재빈 강사입니다.
요새 chat GPT가 여기저기에서 화제입니다. chat GPT가 미국 의사 면허 시험도 통과했다는 소식에 LEET 언어이해 강사로서 chat GPT가 LEET에서는 몇 점을 맞을 지가 갑자기 궁금해져서 한 번 문제를 풀려보기로 했습니다.
chat GPT에게 글을 읽고 문제를 푸는 훈련을 진행해보자고 제안한 뒤에, 작년에 시행되었던 LEET 언어이해 첫 번 째 지문을 읽게 해 보았습니다.
그만 chat GPT에게 에러가 뜨고 말았습니다. 예상치 못한 결과에 당황했지만 "지문 읽기가 필요 없는 문제를 풀게 해보면 어떨까?"라는 생각이 들어서 LEET 언어이해 문제 중 '윗글을 읽고 답하는 형식'이 아닌 문제를 하나 풀게 해 보았습니다.
2023 LEET 언어이해 22번 문항을 풀게 해 보았습니다. 헤겔 철학과 관련된 지문을 읽고 푸는 문제인데 chat GPT에게는 지문을 제공해 주지 않은 채로 풀게 해 보았습니다.
역시 인공지능답게 지문을 읽지 않고도 배경 지식만으로 문제를 푸는 클라스를 보여주었습니다.
덤으로 제가 자체 모의고사를 위해 제작하고 있는 철학 지문 문제들도 풀게 해 보았는데 모두 정확한 답을 맞추는 클라스를 보여주었습니다.
수능 국어나 언어이해에서 배경지식 공부의 중요성을 확인할 수 있는 지점이었습니다. 인공지능 수준의 배경지식을 갖출 수 있다면 지문을 읽지도 않고 문제를 풀 수 있다는 의미입니다 ㅎㅎ
혹시 헤겔 관련 문제는 배경지식을 적용하기에 너무 용이한 것이 아닌가 싶어 다른 문항들도 풀려 보았는데, 다른 문항들도 대부분 지문을 읽지 않고도 배경지식만을 활용하여 쉽게 풀어내는 것을 확인할 수 있었습니다.
그런데 흥미롭게도 chat GPT가 틀리는 문항도 꽤 있었는데요. (지문을 안 읽고 풀리기는 했지만 ㅎㅎ)
위 문제의 경우 답이 1번인데 5번을 골랐습니다. 5번은 많은 학생들이 골랐던 오답이기도 했는데 인공지능도 똑같은 실수를 범한다는 사실을 확인할 수 있었습니다.
0 XDK (+0)
유익한 글을 읽었다면 작성자에게 XDK를 선물하세요.
-
흠... 언매 탐구 벼락치기하느라 제대로 안한지 며칠 됏는데 걍 실모풀까 복습할까
-
어줍잖게 학생을 선생과 제자의 관계로 두기 때문. 사탐강사들은 조 강 현 을 본받아라.
-
또올려서 ㅈㅅ 22살이고 내년3월에 전문대입학해요 걍 다 6~7등급이라 일단...
-
보나마나 0개일게 뻔함
-
부정적분 말고 긍정적분 하라고~
-
참 애매한 성적인듯 딱 서강형인재
-
아
-
사람을 만나고싶음 ㅅ.ㅂ 언제까지 혼자서 입시만 하고있어야해 나도 놀줄알아 술.존나부어
-
그냥쪽팔리면안까면됨 왜뻥치는거야 근데또왜뻥친걸로싸우고잇어 너네도똑같에...
-
이 뇌를 데리고 갈 수 잇을가..
-
-
이해원 파이널 2회분 vs 이로운 파이널 2회분 다 풀 거긴 한데 좀 더 어려운 걸...
-
통합 전 기출 중에서 문학 어려운 년도 알려주실 수 있을까요..? 냅다 다...
-
저희 학원은 어제(7일) 이감 파이널 모의고사를 종강했구요. 오늘 국어, 수학...
-
오늘 남자친구한테 콜라를 받아서 먹으려고 했는데 콜라에 대문짝만하게 '업소용'...
-
화가난다 3
잔다
-
기분탓인가
-
자러가야지 7
쿠우울..잘생긴남자꿈꿔야지..
-
모두원하는대학에서남친/여친과캠퍼스를누비는꿈꾸십쇼~
-
ㄹㅇ로... 다 포진되어읶음
-
ㅋㅋ
-
인싸빙고해봤어요 24
준아싸네요
-
5등급이 평균이라고....
-
하…
-
노베 현정훈 0
지금 물리 노베인데 내년에 현정훈 선생님 수업 들을려고 하는데 가기전에 배기범 듣고...
-
스태틱 3
의 단검(sweet sword)
-
오르비 최하위권 경영학과 20학번 재학중인 형아야 심심한데 아무 주제던 좋으니 질문...
-
혹시 생윤 말고 윤사도 오개념이 있었나요? 김종익쌤거요 윤사는 실모 좀 어렵긴해도...
-
저는 요새 메이플하느라 정신이 없지만 여러분들은 모두 수능 잘 보시길 기원해요!...
-
평생 백수로 살고싶다는 것
-
가장 짜쳤던 애니는 15
달링 인 더 프랑키스 그때 제로투 유행해서 봤는데 건담물 의외로 재밌구나하면서...
-
ㅇ싸빙고 18
ㅅㅂ 저런거 왜 물어봐 슬프게
-
학교마다 있는 전형적인 표독스런? 중년 과탐 여선생인데 내가 정시하면서 문과런해서...
-
하면서 과거 회상하게 됨
-
레인보우테이블 4
-
지듣노ㅇㅈ 0
-
인싸빙고ㅇㅈ 12
이게 맞나...
-
국어 22수능 저리가라 비문학 24수능급 문학 23수능급 언매 영어 1등급 2%...
-
인방 탐방하다 9
채팅창에서 오르비 고닉과 똑같은 프사, 똑같은 닉을 봤는데 과연 우연일까..? 도네도 하시던데 흠
-
14번 얘가 킬러가 아니면 뭐임
-
이왜진
-
차단하지마 5
-
오르비 가입한지 얼마 안돼서 댓글을 못달고 있다가 드디어 달았는데 받는데 시간이 좀...
-
안마셨어요
-
연계 고전어휘 0
연계 고전어휘 알아야하나요?? 관동별곡 같이 중세국어로 된거 현대어로...
-
야!!!!!!!! 13
-
작년 칼빈대 애완동물학과 98 99 1 99 98이 모의지원 넣은거 보고 현웃터짐
-
사후분석해보면 1컷까진 진짜 별거 없는디 현장에선 진짜 별거인 듯 시험이란게 그렇긴 하지만
-
다큐만 보면 일본 망한줄 알겠다 실제로 경제가 안좋은건지 과장된건지 아베노믹스는 성공인가 실패인가
-
어차피 논술 하나고 내가 거기 납치당할 성적을 받을거 같지는 않음ㅋㅋㅋ납치라고 해도 후회없이 다닐듯
와...
수능 문제들은 인공지능이 풀 수 있을만큼 정교하고 확실하게 만들어졌다 ㄷㄷ
반도체 ai 주식 지금 긁어모읍시다
ㅋㅌㅋㅋㅋㅋ
배경지식이 많으면 많을수록 치트키이긴하네요이거보고 리트따위 안보기로 결심했다
이거 보고 인공 지능이 되기로 했습니다 감사합니다
존 코너 게이야...
이거 보고 철학과 가기로 했다
배경지식으로 비문학푸는법 ㅇㄷ
chat GPT 공부법 어떠십니까
배경지식(570GB)
어라
어어
이거보고 ai가 되기로 결심했습니다
자, 이제 인강 강사 버리고
챗지피티 공부법 드가자~
올해는 챗지피T 풀커리 타야겠다..
이어폰 챙겨서 들어가기로 했읍니다..
왕...
수능문제는 AI도 틀릴 수 있다 ㄷㄷ..
사실 chat GPT는 생각보다 오류가 많습니다. 질문을 어떻게 하느냐에 따라서 같은 문제에 대해서 다른 답을 말하는 경우가 많습니다.
에이... 인공지능에게 저렇게 배경지식으로만 풀 수 있는 문제를 묻는건 구글에 헤겔에 대해서 질문하는 것과 다를게 없죠ㅠ
놀랍게도 헤겔 문제 뿐만 아니라 거의 대부분의 LEET 언어이해 문제가 인공지능에게는 '배경지식으로만 풀 수 있는 문제'에 해당합니다 ㅎㅎ
그쵸... 그래서 지문을 바탕으로 묻는 문제를 질의시키는게 제일 유의미한거 같아요
현재 단계에서는 문제가 무엇인지 이해하는(것처럼 보이는 것)만으로도 의미가 있는 것 같아요
아직 ChatGPT는 새로운 지식을 추론하고 만드는건 애매하니깐요
와..
선생님 저는 국어문제를 스도쿠풀듯 취미로 풀어보는 평범한 이십대 중반입니다.
리트강사라고 하셨는데, 제가 느끼기에 법학적성시험 2009년것과 2023년이 확 다릅니다. 난이도에서 말이죠.
물론 출제집단이 평가원에서 ~(갑자기 잊어버림..)으로 바뀌긴 했다지만, 어떤 사건들이 있어서 이렇게 확 바뀐걸까요?
단순 출제집단이 바뀌어서? 평가 목적이 달라져서?
2019년을 기점으로 출제기관인 법학전문대학원협의회가 공청회를 진행하고 출제방향을 대거 개편할 것을 공개적으로 천명한 바 있습니다. 2019년 이전과 이후의 LEET(특히 언어이해)는 아예 다른 시험이라고 보아도 무방합니다.
리트는 그러면 최근 시험이 어려운건가요?
선생님은 몇년 리트시험지가 제일 어렵다고 보시나요?
21과 22가 가장 어렵습니다. 가장 최근꺼인 23은 좀 쉬웠구요.