《2018年中国大数据BI行业分析报告》(全文)报告数据观中国大数据产业观察

近年来,随着人们的数据意识和数据素养不断提升,商业智能(BI,BusinessIntelligence)和数据分析领域迎来了快速发展期,据Gartner商业智能报告统计,到2020年全球的商业智能市场容量预计将达到228亿美元。同时,大数据、人工智能、机器学习、深度学习等技术的快速发展,也促进了商业智能和数据分析产品的新一轮进化。

针对这一问题,帆软数据应用研究院调研了规模不一的216家企事业单位,了解到他们的大数据BI应用状态、需求情况、对大数据BI产品功能的期待,同时基于帆软数据应用研究院对行业的长期观察和思考,形成了该篇报告。

主要预测

2018年,中国大数据BI产品将主要在自助分析的可操作性和功能丰富度、平台的安全性、数据管理能力、分析的共享能力、数据挖掘能力、大数据处理能力六大功能模块进行提升。

2018年中国商业智能行业发展分析

(一)行业总体形势向好

在当前经济环境下,企业盈利的压力和难度不断增加,越来越多的企业,尤其是一、二线稍具业务规模的企业,其高层都希望通过精细化运营提升市场竞争力,降低企业的运营成本。这些企业绝大多数都已经在2008年~2015年间上线了各种业务系统,存储了大量管理和运营数据,具备应用大数据BI进行数据分析和数据化管理的各种条件,这些需求将在2018年~2022年继续爆发。值得注意的是,艾瑞咨询在《2017年中国商业智能行业研究报告》中指出,我国已经进入商业智能领域第一方阵,成为发展最快的国家之一,但和美国还有比较大的差距。所以未来中国大数据BI行业总体将呈现加速度增长,市场容量将不断扩大。

(二)大数据BI厂商马太效应显现

马太效应是指强者越强,弱者越弱的现象,国内BI行业的马太效应已经显现。据帆软品牌部调研数据显示,处于行业第一梯队的帆软、Tableau、微软PowerBI的品牌知名度和市场份额与其他厂商进一步拉大。帆软2017年全年营收2.77亿,远超其他国内厂商之和。同时帆软销售部反映,2017年度销售跟单中遇到的竞品种类和数量均较2016年有相当大幅度的下降。BI行业出现马太效应实属必然,综合实力强大的厂商更能投入资源做好产品、服务,解决更多用户的需求和问题。可以预见,2018年中国BI行业马太效应将进一步增强,逐步淘汰掉实力弱、规模小、产品差的企业。

(三)新型自助式BI与传统型BI平分秋色

得益于敏捷、自助的特征,从2013年起新型自助式BI迎来了高速发展期,这一时期也是传统型BI的衰退期。

2017年,传统型BI与新型自助式BI在国内市场中平分秋色。受访企业中,约50.2%的企业仍然在使用传统型BI,其中最典型的需求是企业常规日报、月报等汇总分析报告。约49.8%的企业应用新型自助式BI,通过报表平台+自助式BI+大数据底层平台的解决方案,来解决企业综合的数据展示和分析需求,形成经营和战略决策。在调研中我们注意到,约有18%的企业引进了新型自助式BI,部分或全部替代了传统BI。虽然传统型BI尤其自身优势和应用场景,但随着新型自助式BI的不断发展,传统型BI必将逐渐退出历史舞台,从国际传统BI巨头积极调整产品结构可见一斑。

2017年中国商业智能用户状况分析

根据企业的IT人员和业务人员在数据分析中的工作量和投入程度占比,我们将BI用户(企业)划分为5大类型,即BI应用金字塔模型,以更好的统计、分析企业的BI应用状况:

(一)BI应用金字塔模型

1.IT完全主导型

○调研中发现,处于“IT完全主导型”这一等级的企业,约有93.2%都在使用传统型BI工具,企业的业务人员基本没有能力,也没有需求去自主完成数据分析的工作。这些企业的业务变革并不剧烈,企业管理层认为当前的日常数据报告能够满足企业管理和决策的需要,相对缺少变革的动力。

2.IT强主导型

○从调研数据来看,这类企业中,67.5%的企业认为当前业务人员不具备数据分析的能力。而企业需要快速完成部分数据分析工作,所以选择让IT人员更多承担工作。这类企业中普遍认为,商业智能产品本身并非能够快速上手,且业务人员仍需要统计学基础,阻碍数据分析工作从IT人员向业务人员的转移。

3.业务强主导型

○从调研数据来看,这类企业中,超过80.2%是曾经推行传统BI的企业,并且部分业务人员是有较高学历和能力的,能够学习和掌握商业智能工具和数据分析技能,并愿意在工作中积极使用;从帆软数据应用研究院的实地走访的部分企业来看,这些企业普遍行业排名靠前,公司从高层就重视数据分析工作。

4.业务完全主导型

○相比于第三类使用人群(业务强主导型),这类用户的一大特点是业务变革十分迅速,从事业务工作的人员学历普遍较高,业务经营和发展需要企业快速做出决策。而基于数据分析得出的业务判断相比个人历史经验准确度更高,是这类企业基本共识。比如在新兴的互联网企业,或者新零售领域,这个特点尤为突出。

5.智能自助型

(二)BI用户状况分布

▊基于BI应用金字塔模型,2017年企业分布如下;

○从调研数据中,我们可以得出两大结论:

1、IT人员主导企业数据分析的模式仍占据主流,也就是IT驱动仍是2017年企业商业智能平台应用现状。从数据调研的受访企业来看,有高达60.5%的企业的数据分析工作仍是第二类型(IT强主导型),甚至有21.5%的企业的数据分析工作处在第一类型(IT完全主导型),这显然和业务人员自助数据分析的目标距离遥远。

2、新型自助BI正在成为商业智能市场的主流。17.5%的企业是在2017年上线了新型自助BI,实现了让少部分业务人员自助完成BI数据分析的目标。

2018年商业智能用户需求分析

(一)企业多级部门数据分层次IT权限和平台管控,占受访企业97.6%

○需求描述:BI工具支持企业的多级部门的数据/分析页面权限管控,使得不同层级的部门机构只能看到本部门机构和辖属部门机构的数据/分析页面。

○需求产生的原因:有的信息中心为释放压力,放权给业务部门使用数据,一旦口子打开,数据缺口就会像洪水一样泛滥,就又会走向另外一个极端,导致放权下的数据管理混乱,数据口径不统一,部门之间的数据壁垒等等问题就会出现,同时这将给企业带来极大的数据安全隐患。

○满足该需求对企业的价值和意义:在满足业务部门BI数据自助分析的同时,兼顾企业的数据权限管控,形成企业以IT部门集中管理下的良性数据分析风貌,杜绝企业数据安全隐患。

(二)业务人员可通过BI工具进行自助数据分析,占受访企业94.5%

○需求描述:业务人员可以在浏览器前端,对自己权限范围内的数据进行多维拖拽探索和自助分析,发掘隐含在数据中的业务价值。

○需求产生的原因:企业的传统信息化建设中,IT信息中心对公司数据进行高度集中的管控,来自企业各职能部门的数据处理以及报表就会全部由IT人员来输出,一旦业务部门需求集中扎堆,就会造成响应不足,业务部门怨声载道。信息中心自身成员熬夜加班做报表,成就感却很低。

○满足该需求对企业的价值和意义:通过高效灵活的BI工具,业务人员对自己权限范围内感兴趣数据进行多维拖拽探索和自助分析,以工具简单易上手的低学习成本,让真正对分析业务价值最熟悉的业务人员实现自助数据分析探索,最大化业务数据的分析维度和分析效率,灵活发掘数据中可能潜在的业务价值,同时也解放了IT人员的劳动力,降低企业人力成本。

(三)可快速搭建型自助BI业务数据模型,占受访企业87.5%

○需求产生的原因:传统BI工具创建的底层数据关联相互独立,无法重复利用,一旦遇到新的业务数据计算分析场景,数据关联就需要修改或重新创建,极为麻烦,非常不利于IT人员维护。

○满足该需求对企业的价值和意义:通过BI工具快速构建的新型自助式BI业务数据模型,较传统BI工具针对不同业务分析场景需要多次、重复建模的应用痛点,极大地提高了BI工具的企业中业务数据分析应用的效率,解放了以往IT人员对数据维护的压力。

(四)OLAP多维分析:上卷、下钻、旋转、切片、联动、跳转等,占受访企业84.5%

○需求描述:BI工具支持强大的页面OLAP多维分析功能,包括分析视角的上卷、下钻,维度的旋转切换,指标的切换,分析数据的切片过滤,组件之间的联动过滤、页面超级链接跳转等。

○需求产生的原因:随着业务发展的复杂化,单一角度的数据分析往往难以再发掘出更多有价值的潜在业务信息,取而代之的是需要BI工具能够满足强大的页面OLAP多维分析功能。

○满足该需求对企业的价值和意义:通过BI工具强大的OLAP多维分析功能,以实现多角度、多关联数据之间的数据无限层次探索分析,发掘出数据中潜在的业务价值。

(五)大数据处理性能处理能力达到十亿数据秒级响应,占受访企业63.6%

○需求描述:BI工具可支撑处理亿级以上大数据分析计算的秒级响应,提供多维加速引擎对传统关系型数据仓库(SQLServer、Oracle、Mysql等)进行数据提速处理,同时也支持实时对接企业大数据平台(Vertical、Kylin、Greenplum等)进行数据分析计算。

(六)业务人员可完成工具层面的零代码数据加工处理工作,占受访企业57.5%

○需求描述:BI工具可通过快速易上手的交互方式,让业务人员也能完成工具层面的零代码数据加工处理工作,例如例如表合并、分组统计、结构数据分层、过滤、增加列、同比环比、累计值、所有值、公式运算等数据清洗和数据处理方法,实现对数据的无限层次多维透视分析统计。

(七)移动端数据分析查看支持,占受访企业44.9%

中国大数据BI产品功能预测

结合用户需求调研,和我国BI厂商的产品计划研究,2018年如下六个大的功能模块将会得到增强:

(一)提升自助分析的可操作性和功能丰富度

为满足业务人员可通过BI工具进行自助数据分析的需求,中国大数据BI产品需要改善自助分析的功能和可操作性,包括图表的丰富性。

前端布局自定义搭配,让业务人员随心所欲布置。比如仪表板自由布局,可快速拖拽生成所需要分析的页面;在全面支持常见的柱状图、条形图等图形基础上,增加支持中国(世界)地图、GIS地图、桑基图等大数据图表;

为了适应更加多样的用户,大数据BI平台需要支持强大的OLAP多维分析功能,包括分析视角的上卷、下钻,维度的旋转切换,指标的切换,分析数据的切片过滤,组件之间的联动过滤、页面超级链接跳转等。业务人员在OLAP多维分析的基础上,能够在数据分析查看时,再次对所有维度进行二次的维度指标加工,并无限层次多维透视分析统计,全面开放业务人员对数据的处理和分析操作,以满足当前中国用户多个视角、多个层级的分析需求,把传统业务分析的智慧充分沉淀到数据分析系统中来。

为了给不同用户提供个性化的视觉体验,大数据BI平台支持表格动态数值预警功能和图形设置动态警戒线,支持图表样式风格自由拖拽调整。同时,也需要大数据BI平台智能自动设置预警值和样式风格等。

(二)提升平台的数据挖掘能力

为满足企业业务人员自助数据分析和自动挖掘的需求,中国大数据BI产品需要在已有的数据可视化和数据分析的功能基础上,增强数据自动挖掘能力,使业务人员在能够掌握挖掘基本概念的基础上,深入挖掘分析业务数据,为业务运营提供数据结论支持。

大数据BI平台需要支持嵌入式高级分析功能,用户能够轻松使用平台内置的高级分析功能,也可以通过导入和集成外部开发的高级分析模型。比如平台内含数据挖掘常见算法(如线性预测、时序预测、聚类、分类等),或者提供外接其他数据挖掘平台和工具的可视化接口(如R语言或者Python语言),甚至内含适合特定业务场景的挖掘模型。

(三)提升平台大数据处理能力

为满足企业对大数据BI平台实时响应的需求,中国大数据BI产品需要将当前大数据处理能力提升一个量级,达到10亿数据量秒级响应水平,同时支持丰富多样的数据源。

大数据BI平台需要支持丰富的数据源,如企业主流的关系型数据库、大数据平台、NOSQL数据库以及多维数据库,需要支持实时对接数据平台和分布式引擎拓展,同时支持跨数据源关联,同时支持对较大级别数据量进行数据抽取和索引建模,提高数据分析效率。

(四)提升平台的数据管理能力

为了满足中国企业业务人员用户对数据处理的需求,中国大数据BI平台需要提升自身的元数据管理能力、数据的ETL处理能力、数据存储能力。

近几年来,中国数据分析人才迅速增加,企业中也成长出一批有一定数据分析能力的业务人才,这些中国企业业务人才更多的是需要对数据进行ETL处理和存储,这就需要平台功支持用于查询、提取、转换和加载的功能,具有索引、管理、调度数据的能力。

(五)提升平台分析的共享能力

随着ERP、OA、MES、HIS等常见业务系统的完善,企业少则数十套IT系统,多则上千套系统。新型自助BI需要能够与多个系统同时融合,全面分析企业的业务数据。这就需要中国大数据BI产品需要加强产品与不同软件系统的集成融合能力,这是中国企业面临的共同难题。大数据BI平台需要支持嵌入式部署,如主流的应用服务器,支持跨平台的权限集成和页面集成。

为满足企业人员实时办公、互通信息的需要。大数据BI平台还需要支持移动端上共享和查看分析结果,支持在移动端对分析结果进行数据层级钻取穿透、联动等。

(六)提升平台的安全性

为了满足企业多级部门同时使用、不同权限的功能,中国大数据BI产品除了要提供灵活丰富的用户管理功能、权限控制功能,还需要内置强大的用户行为监控与分析功能,确保企业的数据安全和信息保密。

大数据BI平台将支持持批量导入用户,支持同步企业统一权限管理数据库中的用户,以企业IT系统统一的用户管理方式进行用户管理。支持用户以企业IT系统统一的用户权限认证方式进行权限管理。同时,需要支持短信平台功能,并可用于用户账号身份验证等,多种用户和权限管理方式,来满足广大中国企业的不同的安全级别要求和安全管理策略。

为了保证大数据BI平台系统持续支持企业经营管理,需要大数据BI平台支持系统数据迁移到企业数据库,支持对系统进行备份与还原,备份可以手动或设置周期定时备份。同时,支持云端服务器部署和本地服务器部署,支持多机热备,达到企业的灾备要求。此外,为了有效避免BI平台出现严重异常,还需要支持监控自身的运行性能,遇到系统性能风险,提前给出系统预警信号。

THE END
1.数据挖掘概念(AnalysisServices该步骤包括分析业务需求,定义问题的范围,定义计算模型所使用的度量,以及定义数据挖掘项目的特定目标。这些任务转换为下列问题: 您在查找什么?您要尝试找到什么类型的关系? 您要尝试解决的问题是否反映了业务策略或流程? 您要通过数据挖掘模型进行预测,还是仅仅查找受关注的模式和关联? https://technet.microsoft.com/zh-cn/library/ms174949(en-us,sql.105).aspx
2.大数据分析挖掘潜力洞察研究大数据分析挖掘潜力-洞察研究 下载积分: 1388 内容提示: 大数据分析挖掘潜力 第一部分 大数据分析的定义与特点 2 第二部分 大数据分析挖掘技术的发展历程 5 第三部分 大数据分析挖掘在各行业的应用案例 https://www.doc88.com/p-70480475177656.html?s=rel&id=3
3.数据挖掘的分析方法可以划分为关联分析序列模式分析分类分析和数据挖掘是从大量数据中提取有用信息的方法,主要分为四种分析方式:关联分析、序列模式分析、分类分析和聚类分析。在本指南中,我们将详细介绍这四种方法的实现过程,并提供相应的代码示例。 数据挖掘流程 首先,我们需要明确数据挖掘的基本流程,如下表所示: 流程图 https://blog.51cto.com/u_16213297/12863680
4.数据挖掘的六大主要功能数据挖掘的六大主要功能 数据挖掘的历史虽然较短,但从20世纪90年代以来,它的发展速度很快,加之它是多学科综合的产物,目前还没有一个完整的定义,人们提出了多种数据挖掘的定义,例如:SAS研究所(1997):“在大量相关数据基础之上进行数据探索和建立相关模型的先进方法”。Hand et al(2000):“数据挖掘就是在大型数据库https://www.cda.cn/view/25648.html
5.数据挖掘主要包含哪些功能?数据挖掘的功能数据挖掘的功能主要包括,数据分类、数据估计、数据预测、数据关联分组、数据聚类,及数据循序样式采矿等六大功能。 数据分类 数据分类为数据挖掘中常见的功能之一,顾名思义即是将分析对象依不同的属性分类加以定义,建立不同的类组。数据挖掘中的分类是指针对未发生的结果进行预测分类,主要包括归纳和推论两步骤,其主要目https://blog.csdn.net/duozhishidai/article/details/87968943
6.数据挖掘的主要功能是什么?患者男性,19岁,在烈日下踢足球1 小时,大量出汗,出现头晕、胸闷、心悸、 恶心,左侧小腿肌肉痉挛。査体:腋温 38℃, 脉搏105次/分,血压90/50mmHg,神志清 楚,双肺未闻及干湿性啰音,心率105次/分,律齐。最可能的诊断是 https://www.shuashuati.com/ti/11e1b939ca024937b7016d66d7af898b.html
7.管理信息系统第三部分作业011赖颖璇同时这个系统也不是静止不变的,不但网络间传输的数据不断变化,而且网络的构成模式也在实时进行调整。 6.数据挖掘的主要功能: 数据挖掘主要分为六大功能:(1)数据特征化;(2)关联分析;(3)分类与预测;(4)聚类分析;(5)离群点分析;(6)演化分析。https://www.cnblogs.com/lyx1997/p/8179176.html
8.软考高级——信息系统项目管理师(第4版)思维导图模板相当于工业互联网的“操作系统”,它有四个主要作用: 数据汇聚。网络层面采集的多源、异构、海量数据,传输至工业互联网平台,为深度分析和应用提供基础。 建模分析。提供大数据、人工智能分析的算法模型和物理、化学等各类仿真工具,结合数字孪生、 工业智能等技术,对海量数据挖掘分析, 实现数据驱动的科学决策和智能应用。https://www.processon.com/view/654c455f8f11b40fe56ece43
9.2022年职业教育国家级教学成果奖“数字化”主题获奖成果分析1.数据挖掘,促进教学管理模式创新 在现代教育管理理念指导下,一些职业院校持续调整教学管理体系结构,特别是针对传统教学管理中各自为政、效率低下等问题,挖掘智慧平台系统优势,有效打通职业教育教学过程全要素和教学管理全流程。比如,陕西工业职业技术学院等单位建设了包括教育教学管理平台等六大信息化模块,依托数据中心,实现https://www.lnxdfwxy.edu.cn/info/1046/9319.htm
10.网络规划设计师论文(推荐10篇)传统规划主要从覆盖与干扰两个维度分析,不能完全识别出高价值站点,导致网络部署后出现建设偏离业务热点,超闲小区较多等问题。而基于大数据挖掘的LTE网络规划可基于话务热点、用户/终端及价值业务等多维度进行关联性分析。首先梳理出数据及话务热点、智能终端/数据卡渗透高区域,判定流量价值高的区域;其次发掘出数据业务使用https://www.hrrsj.com/wendang/lunwen/728372.html
11.2022年泸州公需科目答案51教学网2.信息检索和数据挖掘都是从数据中发现有价值的“东西"A.正确 正确答案:A 3.百度搜索引擎是一个集信息控集、信息存储、信息组织。信息交流等信息功能为-体的,具备强大信息辅助功能的网络信息工具。A.正确 正确答案:A 4.本讲是到习近平总书记在党的十九大报告中指出:“有事好商量众人的事情由众人商量是人民民主https://www.51jiaoxue.cn/post/1321.html
12.客户关系管理论文(精选14篇)例如,应用数据统计模块查找定向信息,或者应用互联网的搜索功能进行相应的网页或者是网站的查找,则是数字挖掘技术中的信息检索(informationretrieval)领域的技术。随着数据挖掘技术的应用范围和应用种类的不断扩张,当下数据挖掘技术已经被广泛的应用于信息检索工作的开展进程中。根据当下数字挖掘技术的主要应用特点和应用方向,https://wenku.puchedu.cn/7237.html
13.网络数据库毕业论文8篇(全文)JDBCAPI主要是实现与JDBCManager之间的通信功能,JDBCDriverAPI主要是实现数据库驱动程序与JDBCManager之间的通信功能,也可建立新的数据库连接,实现全局SQL数据库快捷访问[3]。JDBC结构示意图如图1所示。JDBCAPI功能模块中包含许多数据库操作常用的接口,负责建立数据库连接,实现对孤岛采油厂生产信息网络远程数据库的访问。https://www.99xueshu.com/w/file3w3lw5fn.html
14.智能质检系统功能(六大功能介绍)总之智能质检系统可以实现自动质检,能有效提高工作的效率,提高人工的服务,凭借着这六项功能已经深入人心,得到众多企业的认可,可以给企业带来强而有力的帮助。 合力亿捷智能质检系统基于ASR/NLP/情感模型/数据挖掘等能力支撑,支持在线文本/通话录音/工单文本等多数据源检测,提供开放的个性化质检模型匹配,人工质检与机器质检https://www.hollycrm.com/innews/related/4992.html
15.袁锋元宇宙空间著作权合理使用制度的困境与出路——以转换性使用正如在美国的“Hathi Trust案”与“谷歌图书馆案”中,谷歌公司均使用了文本数据挖掘技术,对原作进行完整的数字化复制和利用。但其提供的搜索和片段浏览功能是为了方便用户搜索其感兴趣的书籍,提高用户检索图书的效率,同时也利于保存古老文集,有助于学术研究,有益于社会公众,因而具有高度转换性而不构成侵权。也正是https://www.jfdaily.com/sgh/detail?id=662666
16.QC小组活动那些事儿知识库质量学堂质量管理知识库2020版准则4.1.3b)条款要求对数据和信息进行分层整理和分析,更加强调“分层整理”的重要性。这么做是为了规避很多QC小组经常犯的一个错误,即对反映课题现状的数据挖掘不够充分,分层不够全面和深入,在其后的原因分析阶段不得不再次进行分层分析。 3)确定主要原因 http://www.jzx7788.com/html/anlifenxi/183865.html