浅谈BI和大数据的关系_Gospelanswer的博客-CSDN博客


本站和网页 https://blog.csdn.net/Gospelanswer/article/details/78187117 的作者无关,不对其内容负责。快照谨为网络故障时之索引,不代表被搜索网站的即时页面。

浅谈BI和大数据的关系_Gospelanswer的博客-CSDN博客
浅谈BI和大数据的关系
Gospelanswer
于 2017-10-09 21:39:46 发布
10999
收藏
分类专栏:
浅谈系列
文章标签:
hadoop
大数据
商业智能
bi
数据仓库
版权声明:本文为博主原创文章,遵循 CC 4.0 BY-SA 版权协议,转载请附上原文出处链接和本声明。
本文链接:https://blog.csdn.net/Gospelanswer/article/details/78187117
版权
浅谈系列
专栏收录该内容
2 篇文章
1 订阅
订阅专栏
欢迎进QQ群讨论:672600296
----------------------------------------------------------------------
前言
最近发现很多人都想入门大数据,有刚毕业甚至还没毕业的学生也有从其他方向转过来的工程师,甚至于很多人问做BI挣得的钱多还是做大数据挣得钱多
本文简单的阐述一下笔者对其的理解,仅供参考~
一 概念
BI又称商业智能分析,个人理解为是一个解决方案,其作用是将企业的数据整合并快速准确的提供数据给需求方使用,简单的可以说是由数据同步,数据仓库,数据可视化,策略算法等部分组成,是一个相对抽象的概念。笔者后续会更新什么是数据仓库,有不理解的朋友可以跟一下笔者后续的博文
大数据本义是指海量的数据并且具有4V的特性。个人觉得目前人们常说的大数据可以粗浅的理解为所谓的大数据工程师用Hadoop,Spark等工具处理数据,其目的就是做自己企业的商业智能。
个人觉得从概念上讲大数据其实就是BI的一种实现方式。
二 工作职责
BI工程师在现在很多公司可能岗位职责主要是做报表,其工作内容主要是利用一些报表软件开发不同类型的报表,比如用tableau,biee,echarts等实现普通明细报表或者热力图,地图上卷下钻等。在传统行业里可能该岗位要求会sql以及相关工具即可,互联网行业则要求有一定的代码能力。
大数据工程师在各个公司的岗位职责则有多种情况,其一是做底层平台开发和维护,比如搭建维护hadoop集群,开发调度平台或者基于一些调度平台进行二次开发,开发可视化平台,即席查询平台等,这种工作要求有较强的coding能力并且对常用的开源数据产品源码有一定认识;其二是做数据开发,搭建自己公司的数仓平台,从数据同步到数仓模型设计到数据开发,这种工作要求有较强的SQL开发和调优的能力并且需要有一定的数仓模型设计功底以及一些基础的Java和Python开发能力需要去写udf或者mr,storm程序等;其三则是什么都做一点~
每个公司对其职位的定义以及工作内容可能略有不同,这里只是个人的一点看法
三 个人认知
个人觉得一个数据部门今后会由以下几部分组成:
基础工程组:负责搭建维护Hadoop/Spark等集群,开发调度平台,报表平台等底层开发工作,也就是我在工作职责里提到的第一种情况
数据开发组:负责企业数据仓库模型的设计并在基础工程组开发的数据平台上进行数据开发,可视化平台上配置报表等,包括实时和离线两部分
策略算法组:主要负责从数据开发组完成的一些数据表中拿自己需要的数据去做处理来实现搜索排序,推荐,动态调价等功能模块。
结论
个人看法:对想问大数据工资高还是BI开发工资高的朋友们说一句,影响薪资的因素跟你从事的方向,技术能力,公司对其岗位的重视度,该岗位需求的紧急度以及个人运气都有关系,无论是做哪方面的工作都有高薪人士,选个自己喜欢做的深入去做即可~
------------------------------------------------------------------
欢迎进QQ群讨论:672600296
Gospelanswer
关注
关注
点赞
收藏
打赏
评论
浅谈BI和大数据的关系
欢迎进QQ群讨论:672600296----------------------------------------------------------------------前言最近发现很多人都想入门大数据,有刚毕业甚至还没毕业的学生也有从其他方向转过来的工程师,甚至于很多人问做BI挣得的钱多还是做大数据挣得钱多本文简单的阐述一下笔者对其的理解,仅供参考~一 概念BI又称...
复制链接
扫一扫
专栏目录
大数据智能分析(BI)平台设计1---基本概念
sunlen的专栏(编程技术探讨)
08-24
681
这里底层基于Phoenix和ClickHouse作为大数据数据库,构建大数据智能分析平台,底层通过元数据管理,构建数据集、字段、指标、维度等,上面通过图表配置、看板配置,通过拖拉拽快速构建报表。
ETL数据抽取、转化、加载,基于Flink Sql构建流批一体的实时数据仓库。本设计会分为多个篇文章,讲解整个系统架构设计的细节。
整个大数据智能分析平台,作为一个数据中台,对外提供各种API,与第三方应用集成。
首先会介绍整个系统体系设计到的各个名词。
大数据与BI的联系与区别
hualalalalali的博客
08-12
721
数据发展时代,企业也都搭上了大数据这台顺风车。在战略选择上,是更应该偏向于大数据,还是BI。这一直是讨论的话题。大数据与BI有什么联系,在选择上又有哪些区别点,下面我将分别介绍大数据与BI,揭开大数据BI的面纱。
BI(商业智能)
商业智能也被称为商业智慧或商务智能,人们习惯的称呼为“BI“,BI(商业智能)技术提供使企业迅速分析数据的技术和方法,包括收集、管理和分析数据,将这些数据转化为有用...
评论 2
您还未登录,请先
登录
后发表或查看评论
五个角度浅析大数据与BI的区别
weixin_34221036的博客
08-01
420
BI(Business Intelligence),中文翻译是商务智能,是一套完整的解决方案,用来将组织中现有的数据进行有效的整合,快速准确的提供报表并提出决策依据,帮助组织做出明智的业务经营决策。
大数据(Big Data)是从收集的海量数据中,通过算法将这些来自不同渠道、格式的数据进行直接分析,从中寻找到数据之间的相关性。简单而言,大数据更偏重于发...
【阅读笔记】BI系统介绍及建设思路
最新发布
wondersfan的博客
10-29
834
本文对BI系统的学习资料进行收集整理,持续更新…
BI数据分析平台
beyond94的博客
04-11
3845
什么是BI数据分析平台?(What)
商业智能(Business Intelligence, BI),指用数据仓库、数据挖掘、数据可视化等技术进行数据分析,将企业中现有的数据转化为知识,辅助业务进行经营决策的一种技术方式,表现形态可以是一套大数据技术组合的解决方案,也可能是一款数据分析工具。
参考博文:
BI系统概述(上)——BI价值及核心模块
BI系统概述(下)–BI功能规划及设计
数据产品:自助BI产品实践指南
BI & 数据分析平台产品发展趋势
数据分析工具的产品形态有定制化的可视化开发平
BI数据分析工具
queshu_KY的博客
03-30
2236
数据分析是指用适当的统计方法对收集的大量数据进行分析,将对它们加以汇总和理解并消化,以求最大的开发数据的功能,发挥数据的作用。数据分析是为了提取有用信息和形成结论而对数据加以详细研究概括总结的过程。
BI数据分析师究竟是做什么的?
xuezhangmen的博客
05-20
8221
想必“BI”一词在数据分析软件行业内早已耳熟能详了,但是行业外还是许多人不了解,甚至还有人对BI存在一定的误解,比如一些人觉得目前的BI分析软件只停留在工具化层面上,分析功能方面还未真正涉及到,甚至觉得现在的一些BI厂商在鼓吹自身的BI软件的分析如何强大等,未免有些夸张…
提及到这,BI分析软件纷纷想为自己正名:分析作为BI的必备功能之一,这真的只是夸张化吗?不,只能说BI软件所涉及到的分析复杂程度有所不同,这或许也是企业上线BI系统的价格能从几万到几十万元甚至上百万元不等的原因之一吧。
下文中,小编便为大
大数据时代BI平台何去何从
hualalalalali的博客
07-01
96
信息化时代的高速发展,使得大数据的作用深入人心。大数据也成为当下几大热点词汇之一,企业每天产生数以万计的数据都需要对数据进行处理,数据处理的方法也在不断地与时俱进。就现如今的发展趋势而言,大数据技术的发展如火如荼。大数据是新资源、新技术和新理念的混合体。从资源视角来看,大数据就是新资源,体现了一种全新的资源观。因此,处理好大数据的问题,就拥有了提前了解市场的能力。但是,大数据分析技术也面临着一些问.........
大数据与BI的区别
caodongfang126的博客
03-07
1072
BI(Business Intelligence),中文翻译是商务智能,是一套完整的解决方案,用来将组织中现有的数据进行有效的整合,快速准确的提供报表并提出决策依据,帮助组织做出明智的业务经营决策。
大数据(Big Data)是从收集的海量数据中,通过算法将这些来自不同渠道、格式的数据进行直接分析,从中寻找到数据之间的相关性。简单而言,大数据更偏重于发现,以及猜测并印证的循环逼近过程。
...
【网易有数】BI数据分析工具一
weixin_67760946的博客
05-01
953
网易有数BI学习记录
数据可视化:BI指标数据处理
m0_66248387的博客
10-13
166
实现BI指标数据,我将使用经济行业的指标数据处理,我将用“用指标解析银行数据”大数据可视化分析面板,给大家展示BI指标数据的处理过程。首先,指标数据区别于传统的统计数据,指标数据要体现出数据的特点,要展现出每日观测数据人员迫切想要看到的统计量,让庞大的数据变得“规矩”起来。接下来,我们将以银行数据为例子,用指标解析数据,带大家领略指标的“奇妙“使用。数据指标有别于传统意义上的统计指标,它是通过对数据进行分析得到的一个汇总结果,是将业务单元精分和量化后的度量值,使得业务目标可描述、可度量、可拆解。
BI和大数据你能分清吗?
weixin_33778544的博客
06-25
490
BI(Business Intelligence),中文翻译是商务智能,是一套完整的解决方案,用来将组织中现有的数据进行有效的整合,快速准确的提供报表并提出决策依据,帮助组织做出明智的业务经营决策。
商业智能能够辅助的业务经营决策,既可以是操作层的,也可以是战术层和战略层的决策。为了将数据转化为知识,需要利用数据仓库、联机分析处理(OL...
大数据与BI
weixin_42330429的博客
07-17
9225
大数据是什么呢?
大数据(Big Data)是从收集的海量数据中,通过算法将这些来自不同渠道、格式的数据进行直接分析,从中找到数据之间的相关性。简而言之,大数据更偏重于发现,以及猜测并印证的循环逼近过程。
BI又是什么呢?
BI是Business Intelligence的英文缩写,中文解释为商务智能,用来帮助企业更好地利用数据提高决策质量的技术集合,是从大量的数据中钻取信息与知识的过程。简...
什么是商业智能(BI),以及其与数据分析的区别?
斜阳雨陌
01-22
9648
BI(Business Intelligence)即商务智能,它是一套完整的解决方案,用来将企业中现有的数据进行有效的整合,快速准确地提供报表并提出决策依据,帮助企业做出明智的业务经营决策。它是一种产品/服务,这个产品/服务可能包含报表,分析,管理等等利用计算机和编程技术自动化一些商业过程的行为。举例子:水果店老板利用商业智能做出来的报表或dashboard观测自己商店的人流量,购买量,购买时间,
可视化bi平台与大数据分析的关系
热门推荐
meng的博客
09-10
1万+
可视化bi平台,是一个数据分析结果的展示,数据可视化的作用也不容小觑,数据可视化的工具也是多种多样,免费的还是收费的,供企业选择的范围也很多。数据可视化过程汇总也会产生一些数据,或者是数据可视化的工具也可以进行数据的辅助分析,但是这里要明确的是,数据可视化并不能代替数据分析,数据可视化可以看出数据之间有什么不一样的地方,或者数据之间有什么相关系,但是对这些相关性的分析还是需要数据分析的过程,结合专...
6个顶级BI和数据可视化工具
AI悦创·编程私教1v1
08-16
923
如今,有大量强大的可视化工具,可以用于表达想法、可视化数据、向客户和全球社区分享重要的分析结果。本文比较了最常用的 BI(商业智能)和可视化工具平台,并分析了它们的主要功能,
数据可视化之美—BI
杏仁技术站
05-12
780
作者 | 李谦恒数据工程师。逻辑重于代码,高效胜过勤奋。崇尚life work balance。1、引言本文主要面向对象是,对 BI 完全不了解,或只是初步了解的人。从宏观角度介绍了 B...
大数据与传统BI的区别在哪?
dashenghuahua的博客
11-09
7728
大数据和商业智能BI已不是陌生的词,但很多人都并不能很好区别这两者之间的关系,为了更好理解两者区别,我们大圣众包威客平台分享一篇来自网络的文章,从多个角度维度探讨大数据和BI的区别!
  大数据与传统BI是社会发展到不同阶段的产物,我们从几下几个纬度来可以迅速的看出两者的区别:
  第一、从数据来源角度
  大数据应用的数据来源,不仅仅包括非结构化的数据,还有各种系统数据
BI大数据分析是什么,大数据bi工具有哪些
明月说数据
08-31
1514
Gartner:大数据宣传在商务智能市场成效不明显
市场研究公司Gartner指出,去年的大数据宣传未能促进全球商务智能和分析市场出现快速增长。
Gartner称,尽管商务智能和分析市场在2013年增长了8%,增长至144亿美元,但是涨幅低于预期。大数据通常指对来自社交网络、传感器等来源的海量非结构化信息进行的挖掘与分析,而传统的商务智能只是报告和分析结构化数据存储。
Gartner 分析师Dan Sommer和Bhavish Sood在报告写道: “虽然大数据宣传力度在2013年达到了高潮,但是对分析市场
BI大数据名词术语
hzp666的博客
03-17
3876
大数据的出现带来了许多新的术语,但这些术语往往比较难以理解。因此,我们通过本文给出一个常用的大数据术语表,抛砖引玉,供大家深入了解,部分定义参考了相应的博客文章。
聚合 (Aggregation) –
搜索、合并、显示数据的过程
算法 (Algorithms) –
可以完成某种数据分析的数学公式
分析法 (Analytics) –
用于发现数据的内在涵义
“相关推荐”对你有帮助么?
非常没帮助
没帮助
一般
有帮助
非常有帮助
提交
©️2022 CSDN
皮肤主题:编程工作室
设计师:CSDN官方博客
返回首页
Gospelanswer
CSDN认证博客专家
CSDN认证企业博客
码龄8年
暂无认证
15
原创
32万+
周排名
55万+
总排名
4万+
访问
等级
565
积分
38
粉丝
22
获赞
评论
20
收藏
私信
关注
热门文章
浅谈数据仓库和大数据
16444
浅谈BI和大数据的关系
10999
kylin安装部署
3800
编译hadoop支持snappy压缩
2698
Spark Streaming消费kafka示例
2124
分类专栏
浅谈系列
2篇
数据仓库
2篇
数据技术
9篇
最新评论
搭建即席查询平台
qq_31159609
回复
哎呦,不错哦: 木有,不搞了
搭建即席查询平台
哎呦,不错哦
回复
qq_31159609: 解决了么兄台
搭建即席查询平台
qq_31159609:
请教博主,yanagishima启动成功之后,打开页面报404是什么原因呢,急求 谢谢了
HTTP ERROR: 404
Problem accessing /. Reason:
Not Found
Powered by Jetty:// 9.3.7.v20160115
浅谈BI和大数据的关系
name of space:
大佬
浅谈BI和大数据的关系
andy.王:
厉害
您愿意向朋友推荐“博客详情页”吗?
强烈不推荐
不推荐
一般般
推荐
强烈推荐
提交
最新文章
数据开发常规技术栈
Kylin基础优化
Spark Streaming消费kafka示例
2019年2篇
2018年1篇
2017年10篇
2016年3篇
目录
目录
分类专栏
浅谈系列
2篇
数据仓库
2篇
数据技术
9篇
目录
评论 2
被折叠的 条评论
为什么被折叠?
到【灌水乐园】发言
查看更多评论
打赏作者
Gospelanswer
你的鼓励将是我创作的最大动力
¥2
¥4
¥6
¥10
¥20
输入1-500的整数
余额支付
(余额:-- )
扫码支付
扫码支付:¥2
获取中
扫码支付
您的余额不足,请更换扫码支付或充值
打赏作者
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额
抵扣说明:
1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。 2.余额无法直接购买下载,可以购买VIP、C币套餐、付费专栏及课程。
余额充值