일반기술

그리드 기반 대용량 데이터 분류 장치 및 방법

본 발명은 그리드 기반 대용량 데이터 분류 장치 및 방법에 관한 것으로서, 대용량 데이터가 분류되도록 클러스터를 생성시켜 훈련하고, 생성된 클러스터 중 데이터를 대표할 수 없거나 해당 클러스터에 소속된 데이터가 일정 수 이하인 비중이 작은 이상치 클러스터를 제거함으로써, 이에 따른 클러스터의 감소는 데이터 분류의 처리 시간을 단축시키는 효과가 있으며, 분류가 완료된 결과를 기반으로 최적의 임계값을 유도하도록 조정함으로써, 최적의 인식률에 근접할 수 있으며, 동적으로 그리드 자원에 데이터 분류 작업을 할당함으로써, 대용량의 데이터 운용 및 처리가 가능해짐과 동시에 중앙 서버의 병목 현상을 방지하여 안정성을 증가시킬 수 있는 그리드 기반 대용량 데이터 분류 장치 및 방법을 제공하기 위한 것으로서, 그 기술적 구성은 대용량의 데이터 분류에 사용될 이용가능한 그리드 자원을 분류하는 자원 관리 모듈과, 상기 데이터 분류를 위한 임계값을 초기화하여 데이터를 분류하되, 분류가 완료된 데이터의 결과에 따라 임계값을 조정하는 임계값 조정 모듈과, 상기 임계값 조정 모듈로 분류가 완료된 데이터의 결과를 검사하여 결과를 전달하는 결과 테스트 모듈을 포함하는 데이터 분류 관리부; 상기 그리드 자원 및 임계값을 전달하고, 분류가 완료된 데이터를 병합하여 상기 결과 테스트 모듈로 전송하는 다수의 자원 중개 모듈을 포함하는 데이터 중개부; 및 상기 그리드 자원 및 임계값을 수신하여 대용량 데이터를 클러스터로 분류하여 훈련시키되, 이상치 클러스터는 제거하여 상기 데이터 중개부로 전송하는 다수의 데이터 분류부; 를 포함한다.