루나의 마음: 엄마가 말없이 나가면 루나는 무엇을 느낄까
혼동하기 쉬운 점과 요약
혼동하기 쉬운 점
| 혼동하기 쉬운 생각 | 나온 곳 | 바로잡는 법 |
|---|---|---|
| 마음 문항의 정답률이 높으면 장면을 읽고 답한 것이라고 봄 | 문제 1 | 늘 worried 라고 하면 이야기 형식 문항 정답률이 0.50 이지만 쌍 점수는 0 이다. 상태 하나만 바꾼 쌍으로 판정했다 |
| 루나가 엉뚱한 말을 하면 마음을 모르는 것이라고 봄 | 문제 2 | 「I do not know. Nobody told me where Mommy is.」는 그 장면 뒤에 학습 글이 3,529 번 이어 준 말이다. 이야기 형식으로 마음을 묻는 글은 0 편이었고, 그 형식을 넣자 0.09 / 0.25 가 1.00 / 1.00 이 되었다 |
| 같은 마음을 다양한 말씨로 많이 읽히면 묻는 형식도 익힌다고 봄 | 통하지 않은 길 | 딥시크 이야기 3,404 편을 여덟 번씩 넣어도 쌍 점수가 0.27 / 0.56 으로 넣기 전과 겹쳤다 |
| 막힌 칸은 모델을 키우면 열린다고 봄 | 흔들리는 칸, 묻는 형식을 보여 준다 | 87M 은 대화 형식만 열었고, 묻는 형식을 넣자 26M 에서도 0.99 / 0.95 가 되었다 |
요약
감정 규칙표가 장면의 상태(가족이 곁에 있나, 어디 가는지 말했나, 밤인가, 돌아왔나)에서 마음과 이유와 바른 반응을 계산하게 하고, 상태 하나만 다른 쌍 160 개로 시험지를 만들었다. 기준은 쌍의 두 장면을 모두 맞혀야 얻는 쌍 점수다.
규칙표로 쓴 마음 글은 시드 하나만 장면을 따라가게 했다. 딥시크 감정 대화와 반응 묻고 답하기를 넣자 반응 고르기의 쌍 점수가 1.00 / 1.00 이 되었지만, 마음 고르기는 87M 에서도 대화 형식만 열리고 이야기 형식은 시드마다 달랐다. 이야기 형식으로 마음을 물으면 루나는 학습 글이 3,529 번 보여 준 「I do not know. Nobody told me where Mommy is.」를 이어 썼고, 이야기 형식으로 마음을 묻는 글은 0 편이었다.
말씨가 다양한 딥시크 이야기는 이야기 형식의 마음 고르기를 열지 못했다. 시험과 같은 형식의 묻고 답하기를 학습용 장면으로 넣자 26M 에서 0.99 / 0.95, 87M 에서 1.00 / 1.00 이 되었다. 루나가 쓴 답을 딥시크에게 읽혀 학습 글틀의 「I asks」를 찾았고, 고쳐 다시 학습한 판이 마지막 루나다.
루나 설정서 점검
| 새 설정서의 줄 | 이번에(마지막 87M 판) | 남은 것 |
|---|---|---|
| 5. 가족을 사랑한다 | 엄마가 말없이 나가면 worried, 밤이면 scared, 「금방 올게」를 들었으면 calm, 돌아오면 happy 를 쌍 160 개에서 두 형식 모두 맞힌다(1.00 / 1.00). 이유 0.97 / 1.00 | 마음은 가족이 어디 있는지에 따른 네 가지만 시험지에 있다. 친구와 물건 사건의 마음은 반응 시험으로만 측정했다 |
| 1. 다섯 살처럼 말하고 생각한다 | 장면에 맞는 아이다운 반응을 고른다(쌍 1.00 / 1.00). 마음을 제 말로 쓰면 첫 감정 낱말이 규칙표와 0.79 / 0.90 맞는다 | 이야기 형식 마음 말하기는 시드 하나가 0.71 이다 |
막힌 곳
- 대화로 길게 쓴 답의 말씨. 「I ask, “Where is Mommy?” and go to look for Mommy.」처럼 바른 반응을 그대로 옮겨 쓴 답이 많고, 딥시크는 그런 답을 4 점으로 읽었다(
luna_read_M15dm3fxgR+big.out, 대화 형식 평균 4.15). - 글을 더할 때 내려가는 길 칸. 마음 묻고 답하기를 더한 26M 판에서는 「길의 첫 곳」 이야기 형식이 0.88 에서 0.81 로, 87M 마지막 루나에서는 사실을 다 적어 준 이야기의 같은 칸이 0.81 에서 0.76 으로 내려갔다. 원인은 측정하지 않았다.
- 보기 없는 시험. 마음 쌍 점수는 보기 고르기다. 제 말로 쓴 답은 문항 300 개와 딥시크 읽기로만 확인했다.