모두CBT

Karen Spärck Jones의 역문헌 빈도(inverse docu… | [9급 지방직 정보봉사개론] 19년 1회차 기출문제 상세 페이지

1[9급 지방직 정보봉사개론] 19년 1회차
Karen Spärck Jones의 역문헌 빈도(inverse document frequency)에 대한 설명으로 옳은 것은?
1
특정 단어가 출현한 문헌의 수이다.
2
한 문헌에 특정 단어가 출현한 횟수이다.
3
두 단어가 같은 문맥에 출현하면 이 단어들은 서로 관련이 있으며, 두 단어가 같은 문맥에 함께 출현하는 횟수가 많을수록 더 깊이 관련되어 있다.
4
문헌 빈도가 낮은 단어에 높은 중요도를 부여하는 것으로, 많은 문헌에 출현한 단어는 문헌들을 식별하는 능력이 낮다는 가설에 기초한다.
해설

역문헌 빈도(IDF)는 문헌 빈도가 낮은 단어에 높은 중요도를 부여하는 가중치로, 많은 문헌에 나타나는 단어는 문헌 식별력이 낮다는 가설에 기초한다.

일반적으로 전체 문헌 수를 해당 단어가 출현한 문헌 수로 나눈 값에 로그를 취해 구하며, TF·IDF 가중치의 한 축을 이룬다.

idft=log⁡Nnt\mathrm{idf}_t = \log \dfrac{N}{n_t}

  • 특정 단어가 출현한 문헌의 수는 문헌 빈도(DF)로, 역문헌 빈도 자체가 아니다.
  • 한 문헌에 특정 단어가 출현한 횟수는 단어 빈도(TF)이다.
  • 두 단어가 같은 문맥에 함께 출현하는 횟수로 관련성을 보는 것은 동시출현(공기) 분석의 가설이다.

내용에 오류가 있거나 최신 법령·기준과 다른 부분이 보이면 알려주세요. 확인 후 반영하겠습니다.