일반기술

Insight DiscovererO: 종합적인 텍스트 마이닝 프로그램 모음

Insight DiscovererO는 문서로부터 관련 개념을 추출하고 이러한 개념에 따라 문서들을 분류 또는 구분하기 위한 일반적인 클라이언트/서버 아키텍처를 제공한다. 이 제품은 두 가지 특화된 서버를 포함하고 있다: Insight DiscovererO 추출장치 그리고 Insight DiscovererO 분류 장치.Insight DiscovererO는 일반적인 클라이언트/서버 아키텍처를 통한 문서의 추출, 분류 및 구분 작업을 목표로 하고 있다. 이러한 이유로 두 가지 서버가 실현되었다: 1) Insight DiscovererO 추출 장치: 이 서버는 비구조화된 텍스트로부터 실체(개념, 회사명, 정확도, 위치, 등) 및 이들간의 상관관계를 확인하는데, 이는 Skill CartridgesO이라고 지칭되는 특별한 지식 요소에 의해 작동된다.Skill CartridgesO는 관계 또는 관심 사건( 이러한 관계 또는 사건들이 텍스트의 형태로 표시된 방식)을 지원할 수 있는 패턴을 찾을 수 있도록 하는 모델을 정의한다. 예를 들면, 사업 지능 응용분야에서, 자동차 분야의 관계회사들 간의 연합 또는 인수를 찾을 경우, 이는 “인수 회사”, “회사” 또는 “회사를 합병한 회사”와 같은 패턴을 찾는다는 것을 의미한다. "회사"란 회사명이 될 수 있겠지만 또한 회사 자체(기업, 제조회사 등)를 지칭하는 모든 단어들이 될 수 있다. 패턴들이 방대한 상황을 포괄하기 위하여 설계되었으므로, 의미론적 분류의 회사에서 회사의 개념을 지칭하는 모든 단어들을 그룹화하는 작업에 관계하게 된다. 이 기술을 이용하며, 각각 특정 분야에 대하여 특화된 서로 다른 지식 추출 시스템을 구성하는 작업이 용이하다. Insight DiscovererO Extractor를 텍스트 문서에 적용하는 것은 문서에 대한 주석 작업을 가능하게 하는데, 이는, 문서 라우팅과 같은, 향후 다방면에 응용할 수 있는 문장 변형 및 의미론적 태그를 통해 텍스트를 풍부하게 할 수 있다.2) Insight DiscovererO 분류 장치: 이 서버는 문서를 분류별로 정리하기 위한 첨단 수학 알고리즘을 이용한다. 이 장치는 문서들을 미리 정의된 분류로 구분하거나 역동적으로 나타낼 수 있다. 분류화의 첫째 모드는 감독 모드이고 두 번째는 비감독 모드이다. 감독 모드는 새로운 문서에 대한 분류 작업이 자동화되어 있으며 비감독 모드는 일련의 뒤섞인 문서들을 논리적으로 정리된 개념 계보로 변환한다.혁신적인 사항:Insight DiscovererO 추출 장치- 문서에 기록된 경쟁자, 직업, 직위, 일자, 주요 개념 등을 인식한다. 각각의 실체는 역할이 지정될 수 있다.실체 인식 및 패턴에 따른 링크 작업에 필요한 자원들은 Skill CartridgesO에 정의되어 있다. 추출된 개념 및 관계는 텍스트의 언어에 대하여 독립적이다. 쉽게 추가할 수 있고 업데이트 될 수 있는 지식의 조직화는 손쉬운 관리 및 진화를 보장한다. 서버는 다른 응용 프로그램들에 의해 공유될 수 있으며 이들간의 개념에 대한 동차 추출을 보장한다.- 7 개의 서양 언어 지원 (네덜란드어, 영어, 프랑스어, 독일어, 이태리어, 포르투갈어, 스페인어) Insight DiscovererO 분류 장치 - 감독 분류화 작업 (문서를 사용자 정의 분류 형식으로 지정함):기 분류된 문서들에 의한 연습을 통한 자동 습득. 서버는, 배우기 위해 필요한 분류 당 최소한의 문서를 통해, 일련의 예제들을 이용하여 어떻게 분류해야 하는가를 익히게 된다.- 비 감독 분류화 작업 (그들의 특징에 따라 클러스터로 유사한 문서들을 그룹화 함):분류 및 하위 분류에 대한 역동적인 생성을 위한 반복적인 프로세스. 감독 분류화 작업과의 차이점은 기 설정된 분류가 없다는 사실이다. 분류들은 유사성 측정 기능을 이용하여 밝혀진다. The Insight DiscovererO 분류 서버는 텍스트 문서를 필요로 하지 않는다. 이 서버는 단지 분류화 할 수 있도록 각각의 문서를 설명하는 개념의 벡터들을 필요로 한다.주요 장점:이 자바 서버들은 첨단 텍스트 마이닝 기술을 필요로 하는 특정 응용 프로그램을 손쉽게 제작할 수 있게 하기 위하여 독립적으로 사용될 수 있다. 각 서버에서의 XML 포맷의 결과물은, 문서 라우팅, 데이터베이스 저장 등의 다양한 작업을 수행하기 위하여 사용될 수 있다.추출 공정에서의 분야 지정 부분은 Skill CartridgesO이라고 불리는 플러그인 요소에 의해 보장되는데, 이는 새로운 분야, 언어 또는 요구사항들을 신속하고 노력없이 확장할 수 있도록 한다.Insight DiscovererO는 회사의 도메인 지식에 기초한 스마트 응용 프로그램을 제작하는데 사용될 수 있으며 이러한 능력을 혁신적인 텍스트 마이닝 솔루션으로 변화될 수 있도록 할 것이다:- E-CRM: 고객 이메일 분석, 의견 조사, 고객 만족, 등.- 경쟁력 있는 지능: 인터넷, 뉴스망, 특허 및 과학 관련 출판물 등에서의 경쟁 관련 정보의 조사,. - 지식 관리: 내부 및 외부 문서에 대한 분석 및 구성