정보검색에서 단어의 가중치를 계산할 때 사용하는 TF-IDF 기법에 관… | [법원직 9급 전산·사서 정보학개론] 26년 1회차 기출문제 상세 페이지
1[법원직 9급 전산·사서 정보학개론] 26년 1회차
정보검색에서 단어의 가중치를 계산할 때 사용하는 TF-IDF 기법에 관한 다음 설명 중 가장 옳은 것은?
1
TF는 특정 문헌 집단 전체에서 해당 단어가 출현한 총 횟수를 의미한다.
2
IDF는 어떤 단어가 소수의 특정 문헌에만 집중적으로 나타날 때 값이 작아진다.
3
흔하게 쓰이는 관사나 조사 등은 많은 문헌에 등장하므로 IDF 값이 매우 높게 나타난다.
4
특정 단어가 한 문헌 내에서 자주 출현하고, 전체 문헌 집단에서는 적은 문헌에만 출현할수록 해당 문헌에서 그 단어의 가중치는 높아진다.
해설
옳은 설명은 단어가 한 문헌 안에서 자주 나오고 전체 문헌 집단에서는 적은 문헌에만 나올수록 가중치가 높아진다는 진술이다.
TF는 해당 문헌 내 단어 빈도이고, IDF는 그 단어를 포함한 문헌 수가 적을수록 커지는 값이다. 두 값을 곱하므로 문헌을 잘 구별해 주는 단어가 높은 가중치를 얻는다.
- TF는 문헌 집단 전체의 총 출현 횟수가 아니라 특정 문헌 안에서의 출현 빈도이다.
- 소수의 문헌에만 나타나는 단어는 IDF 값이 작아지는 것이 아니라 커진다.
- 관사나 조사처럼 많은 문헌에 나오는 단어는 IDF 값이 높지 않고 매우 낮다.
오류나 개정된 내용이 보이면 알려주세요