231강부터 234강까지의 문제집입니다. 48문항이고 강의를 다 읽은 뒤에 풀도록 짰습니다.
모든 수치는 각 강의의 코드 검산에서 그대로 가져왔습니다. 답을 외우는 문제가 아니라 어느 강의 어느 자리를 보면 되는지 되짚는 문제입니다.
| 묶음 | 문항 | 무엇을 묻나 |
|---|---|---|
| A | 부터 | 행렬로 미분한다는 것 |
| B | 부터 | 계산 그래프 |
| C | 부터 | 역전파 알고리즘 |
| D | 부터 | 벡터화 |
문제 1. 결과의 모양을 정하는 규칙을 쓰세요.
답. 분자의 모양 곱하기 분모의 모양입니다.
문제 2. 손실이 스칼라이면 그래디언트가 어떤 모양인지 쓰세요.
답. 입력과 같은 모양입니다.
문제 3. 강 검산에서 와 의 수치 미분과의 차를 쓰세요.
답. 과 입니다.
문제 4. 의 그래디언트를 쓰세요.
답. 입니다.
문제 5. 에서 의 그래디언트를 구하는 식을 쓰세요.
답. 을 위쪽 그래디언트에 왼쪽에서 곱합니다.
문제 6. 강 검산에서 의 그래디언트가 어떤 연산인지 쓰세요.
답. 위쪽 그래디언트와 입력의 바깥곱입니다.
문제 7. 강 검산에서 층의 야코비 원소 수를 쓰세요.
답. 개입니다.
문제 8. 의 미분을 쓰세요.
답. 입니다.
문제 9. 강 검산에서 정답 갈래의 소프트맥스 값과 그래디언트를 쓰세요.
답. 와 입니다.
문제 10. 강 검산에서 로짓이 일 때 먼저 지수를 취한 결과를 쓰세요.
답. nan이 나옵니다.
문제 11. 강 검산에서 브로드캐스트를 더하지 않고 한 행만 썼을 때의 오차를 쓰세요.
답. 입니다.
문제 12. 강 검산에서 간격 과 의 중앙차분 오차를 쓰세요.
답. 와 입니다.
문제 13. 갈래가 있으면 뒤로 갈 때 무엇을 해야 하는지 쓰세요.
답. 두 경로의 기여를 더해야 합니다.
문제 14. 강 검산에서 마디 의 값을 쓰세요.
답. 입니다.
문제 15. 계산 그래프에 순환이 있으면 안 되는 이유를 쓰세요.
답. 위상 정렬이 실패해 계산 순서를 못 정하기 때문입니다.
문제 16. 곱하기 마디가 뒤로 무엇을 곱하는지 쓰세요.
답. 상대방의 값을 곱합니다.
문제 17. 강 검산에서 의 그래디언트와 의 그래디언트를 쓰세요.
답. 과 입니다.
문제 18. 강 검산에서 를 지난 경로만 셌을 때의 값과 참값과의 차를 쓰세요.
답. 과 입니다.
문제 19. 마디 하나가 들고 있어야 할 것 넷을 쓰세요.
답. 값과 부모와 국소 미분 규칙과 그래디언트 자리입니다.
문제 20. 강 검산에서 그래프로 학습한 첫 계수와 정규방정식의 첫 계수를 쓰세요.
답. 와 입니다.
문제 21. 강 검산에서 표본 개일 때의 마디 수를 쓰세요.
답. 개입니다.
문제 22. 딥러닝이 뒤로 가는 미분을 쓰는 이유를 쓰세요.
답. 파라미터가 많고 손실은 하나여서 한 번에 모든 그래디언트를 얻기 때문입니다.
문제 23. 강 검산에서 층이 개일 때 체크포인트 메모리를 쓰세요.
답. 입니다.
문제 24. 드롭아웃이 있을 때 무엇을 함께 저장해야 하는지 쓰세요.
답. 무작위 씨앗을 함께 저장해야 합니다.
문제 25. 역전파의 단계와 단계를 쓰세요.
답. 입력 전치에 신호를 곱해 파라미터 그래디언트를 만들고, 가중치 전치를 곱해 신호를 앞 층으로 넘깁니다.
문제 26. 강 검산에서 전체 곱셈 횟수와 앞으로 대비 배수를 쓰세요.
답. 이고 배입니다.
문제 27. 첫 층에서 신호를 안 넘겨도 되는 이유를 쓰세요.
답. 입력의 그래디언트가 필요 없기 때문입니다.
문제 28. 층마다 곱해지는 값이 보다 작으면 어떻게 되는지 쓰세요.
답. 그래디언트가 층을 지날수록 사라집니다.
문제 29. 강 검산에서 표준편차 일 때 깊이 와 의 첫 층 그래디언트 크기를 쓰세요.
답. 과 입니다.
문제 30. 강 검산에서 치우침이 일 때 살아 있는 단위 비율을 쓰세요.
답. 입니다.
문제 31. 공유 파라미터의 그래디언트를 어떻게 구하는지 쓰세요.
답. 쓰인 횟수만큼의 기여를 모두 더합니다.
문제 32. 강 검산에서 마지막 시각만 썼을 때의 참값 대비 크기를 쓰세요.
답. 입니다.
문제 33. 갈래가 개일 때 초기 손실이 얼마여야 하는지 쓰세요.
답. 로그 여야 합니다.
문제 34. 강 검산에서 배치로 안 나눴을 때의 참값 대비 크기를 쓰세요.
답. 입니다.
문제 35. 강 검산에서 간격 와 의 상대 오차를 쓰세요.
답. 와 입니다.
문제 36. 그래디언트 검사를 비트로 해야 하는 이유를 쓰세요.
답. 비트는 유효숫자가 모자라 상대 오차가 이 되기 때문입니다.
문제 37. 접히는 반복과 안 접히는 반복을 가르는 기준을 쓰세요.
답. 각 걸음이 서로 독립이면 접히고 의존이 있으면 안 접힙니다.
문제 38. 강 검산에서 바깥곱을 더한 것과 행렬 곱의 첫 원소를 쓰세요.
답. 둘 다 입니다.
문제 39. 강 검산에서 배치 일 때 곱셈 횟수와 파이썬 걸음 수를 쓰세요.
답. 와 입니다.
문제 40. 모양이 맞는 조합을 찾는 방법을 쓰세요.
답. 결과가 있어야 할 모양을 적고 그 모양이 나오는 곱을 찾습니다.
문제 41. 강 검산에서 에 대한 유도 식과 상대 오차를 쓰세요.
답. 이고 입니다.
문제 42. 강 검산에서 손실을 평균으로 둘 때의 크기 비를 쓰세요.
답. 입니다.
문제 43. 활성함수의 야코비가 대각인 이유를 쓰세요.
답. 출력의 각 원소가 같은 자리 입력에만 달렸기 때문입니다.
문제 44. 강 검산에서 소프트맥스를 열 방향으로 했을 때의 상대 오차를 쓰세요.
답. 입니다.
문제 45. 강 검산에서 의 반복문 판과 벡터화 판의 차이를 쓰세요.
답. 입니다.
문제 46. 강 검산에서 잔차를 빠뜨렸을 때의 상대 오차를 쓰세요.
답. 입니다.
문제 47. 가장 위험한 모양 실수의 특징을 쓰세요.
답. 모양이 우연히 맞아 예외가 안 나는 경우입니다.
문제 48. 치우침 그래디언트를 안 더하면 결과 모양이 어떻게 되는지 쓰세요.
답. 브로드캐스트로 배치만큼 복제되어 가 됩니다.
| 무엇을 틀렸나 | 어디로 돌아가나 |
|---|---|
| 부터 | 강 |
| 부터 | 강 |
| 부터 | 강 |
| 부터 | 강 |
여러 묶음에서 고르게 틀렸으면 단원 index의 표들을 먼저 다시 봅니다. 네 강의가 서로를 어떻게 부르는지가 거기에 모여 있습니다.