大数据日志分析管理平台升级项目可行性研究报告.docx

大数据日志分析管理平台升级项目可行性研究报告.docx

《大数据日志分析管理平台升级项目可行性研究报告.docx》由会员分享，可在线阅读，更多相关《大数据日志分析管理平台升级项目可行性研究报告.docx（8页珍藏版）》请在冰豆网上搜索。

大数据日志分析管理平台升级项目可行性研究报告

2019年大数据日志分析管理平台升级项目可行性研究报告

2019年5月

一、项目建设内容

本项目将开发和升级集日志采集、日志搜索、日志审计、日志切割、日志可视化分析、业务可视化分析、深度机器学习、异常监测等功能为一体，以Hadoop、Flume、ElasticSearch、Java等为核心技术，应用于信息安全、系统运维、业务分析管理、业务调用链跟踪、容量管理、根因分析等一体化的大数据日志采集、处理、分析和管理平台。

在公司已有的大数据日志分析管理平台（IVORY）日志分析功能的基础上，使之支持更多数据产品类型，完善更多的企业级功能，满足更复杂的企业用户需求，升级为新一代大数据日志分析管理平台。

为配合应用系统的研发及验证部署，本项目拟购置专用研发测试环境搭建所需的网络交换机、X86服务器、云平台系统、操作系统等共计155台（套）。

为配合大数据日志分析管理平台升级项目所带来的办公需要，本项目还将购置以下办公设备：

为配合大数据日志分析管理平台升级项目所带来的开发需要，本项目还将购置以下专用软件：

配合大数据日志分析管理平台升级项目拟投入人员情况如下：

本项目将对大数据日志分析管理平台（IVORY）产品进行全面升级，具体内容请见下表：

二、项目建设的必要性

1、抓住市场机会，快速扩大技术服务业务规模的需要

随着计算机和网络技术以及新型移动应用的引入，企业IT软硬件设备数量呈几何级增加，各项业务的实现方式也发生了巨大变化，对信息系统的依赖性不断增加，造成信息系统及相关软硬件设备所产生的日志量越来越大，从而对日志数据的管理需求越来越强烈。

大数据日志分析管理平台通过建立统一的日志分析平台，集中收集网络中各种设备和应用的日志，并进行存储、监控、审计、分析、报警、响应和报告，解决了传统日志难以实时处理海量数据和非标准化格式识别、难以挖掘价值的问题，又很好地解决了新型日志分析系统资源消耗大、数据易丢失、缺乏统一部署接入配置管理和关联统计分析功能等问题，具有较好的市场应用前景。

2、提高日志分析技术服务能力的需要

随着互联网时代的来临，金融、制造、能源、电信、交通等行业开始大量采用互联网来提供服务，客户不断进行转型和业务创新。

与此同时，这些客户在发展过程中积累的数据越来越多，对日志分析的管理和利用越来越重视。

在传统数据日志分析的实施场景下，具有手工数据收集困难、故障排查速度较慢、数据分析效率低下、无法进行安全审计等问题，影响企业发现问题的速度并影响决策效率。

大数据日志分析管理平台对运维日志或业务日志等机器数据进行分布式采集存储、告警与快速检索，通过大数据技术进行可视化分析，可用于业务分析、运维管理、安全审计、流量流程链分析等不同场景，能够满足企业大幅提高日志分析技术服务能力的需要。

三、项目建设的可行性

1、符合政策导向

2016年以来，中央及各部委在大数据领域出台了大量扶持政策，大数据产业逐渐进入成熟期，不但自身成为规模庞大的新兴产业，并有望在“十三五”期间，带动IT服务业转型，促进国民经济其他领域的飞速发展。

2016年，继国家发展改革委印发了《关于组织实施促进大数据发展重大工程的通知》后，环保部、国务院办公厅、国土资源部、国家林业局、煤工委、交通运输部、农业部等均推出大数据发展意见和方案。

大数据政策从全面、总体规划逐渐朝各大产业、各细分领域（包括：

国土资源、林业、环保、交通运输、健康医疗、农业农村等）延伸，大数据产业发展也在逐步从理论研究走向实际应用。

2、丰富的人才储备

公司在发展过程中高度重视技术创新和技术积累，为用户提供大数据、数据存储与安全、日志审计、数据库与数据管理、云计算扩展和伸缩、分布式文件管理、开源集群文件管理等方面的解决方案和技术服务。

与此同时，公司逐步构建了自身的大数据技术研发人员团队，包括大数据研发工程师、搜索引擎工程师、算法工程师、数据分析师、分布式计算工程师等。

公司的大数据技术研发人员团队具备多年运维管理产品设计开发经验，以及丰富的高并发、高可靠性、分布式系统架构设计经验。

公司多年的大数据服务经验与技术研发团队有效的支撑本项目的实施。

3、丰富的技术储备

公司成立起就开始关注和研究本项目相关IT运维分析方面的前沿技术。

在本项目中，公司将海量数据搜索与查询、SPL、有效日志切割、开源与云计算、数据安全、大数据分析等领域的多项技术融入开发的产品中，有利于对沉淀技术重新组合、构建、升级、研究，并实现产品化。

与此同时，公司研发的大数据日志分析管理平台基础版本已为多个企业客户提供基于海量日志数据的分析服务，已初步完成技术验证及客户实践，积累了丰富的大数据日志分析管理平台架构、研发及数据分析应用经验。

4、众多客户资源积累

公司现有的大数据日志分析管理平台已初步在广东移动、四川移动、湖北电信、景顺长城基金、博时基金、广东华兴银行、南方航空、四川航空等多家大型企业落地应用，客户对产品的易用性、稳定性及产品功能、服务均有较高的满意度。

同时，公司通过多年的经营，积累了为数众多的长期优质客户，目前客户群体已覆盖金融、电信、交通、政府等多个行业。

上述客户均具有潜在的运维管理能力提升的需求，为大数据日志分析管理产品的推广提供了良好的客户基础。

大数据日志分析管理平台是传统IT运维管理新的方向，通过对海量数据的分析，协助企业管理者进行宏观的决策与运营管理。

目前，大数据日志分析管理平台在IT管理比较成熟的金融、电信、交通等行业兴起较快。

同时，前述行业基于监管要求对日志的安全、审计等有明确的规范，比较有利于产品的开发和推广。

因此，公司在未来在市场拓展方面，将重点在前述行业进行推广和布局。

四、项目投资概算

本项目总投资为7,659.29万元，投资项目的具体明细如下：

五、项目选址及土地使用情况

本项目所需办公场地主要为企业现有或拟购/租办公场所。

六、项目环保情况

本项目基本不产生污染源，少量生活垃圾由环卫部门集中处置。

七、项目效益评价

本项目成本和收入测算如下表所示：

八、项目组织方式、实施进度计划

本项目由公司技术运营中心负责运营，经过公司近年来的经营运作，已形成较为成熟的运营模式并建立了较大规模的客户群。

建设前期工作包括项目申请报告的编制和报批，及设备询价、谈判和签定合同等。

当上述建设前期工作完成后，即转入建设期。

项目建设期约为24个月，项目实施进度计划如下：