문서 전체를 간략하게 요약해 주세요.
데이터 분석 단계에서는 정형, 비정형을 포함한 대용량의 데이터를 분석하기 위한 분석 기술 및 시스템 개발에 대해 지원되어야 한다. 예를 들어 본 연구에서 사용되었던 텍스트 마이닝 분석 기법을 위한 문서 수집 및 처리 자동화 방안 및 분석에 필요한 필드의 정의, 구조화, 정형화 등의 분석 플랫폼 구축이 필요하다. 텍스트 마이닝 외에도 데이터 분석 활용을 위한 관련 시스템인 하둡(Hadoop), 하이브(Hive), 피그(Pig), 머하웃(Mahout), 알(R), 플룸(Flume), 스쿱(Sqoop), 우지(Oozie)등의 분석 기술의 개발 및 분석 플랫폼 구축이 필요하다. 분석 플랫폼 구축 시 정형, 비정형 데이터 저장과 분석을 위한 서버들로 클러스터 구성 및 통합분석환경과 데이터셋을 제공하고, 빅데이터 분석/처리 구조 위에 스크립트 개발, 워크플로우 관리, 시각화 등의 기능을 제공하는 통합분석 사용자 인터페이스 등으로 구성된 플랫폼 개발을 추진하여야 한다.
데이터 분석 단계에서는 대용량 데이터 분석을 위한 기술과 시스템을 개발하는 데 지원이 필요하다. 기술 및 시스템의 예로는 텍스트 마이닝, 하둡, 하이드 등과 비정형 데이터를 다루기 위한 통합분석 플랫폼 등을 들 수 있다.