最新新闻
Teradata CTO谈数据分析的未来 国内最值得关注的四大科技公司 阻碍To B数字化发展的其实是这个行业的一些基本规律和特征 To B步入生态之争阿里甲骨文等中外巨头的野望 金华石墨烯应用研究产业园正式开园 FIT2CLOUD飞致云获红点中国领投B轮融资 自动化掌管后勤UiPath想让机器人帮助管理企业 国务院发布学前教育深化改革意见 B2B领域AI销售是伪命题吗 数据造假泛滥技术尽职调查为VC保驾护航 2019年企业服务发展趋势预测 股市走高 鲍威尔的美元疲软 尽管这些股票的盈利增长估值仍然下跌 全球风险下鲍威尔标志降息后 黄金获得美联储提振 海湾风暴油价上涨至七周高点 你需要看20个股票这个收益季节 印度的2019年联盟预算有利于债券市场而不是股票市场 亚马逊制作指环王MMO设定了前三部曲 Tinder制作的Lite应用程序比原版小25倍 谷歌正在建立一个社交网络 大企业受到创业公司FOMO的影响 为什么法国独角兽BlaBlaCar仍然相信做得比完美更好 这家建筑公司使用建筑食谱来避免设计混乱 为什么设计师是您的开发团队的秘密武器 为什么创造力是公司目前最重要的软技能 汽车即服务阿里巴巴和骑乘心理健康以及金融服务的未来 千雨堂眼贴真的可以去黑眼圈吗 趣步推荐人13341391:6招教你玩转趣步APP! 联邦配资:股票配资岛形反转在实战中的操作技巧有哪些? 证券配资开户金猪配资:股票投资需要慢工出细活 切记不要操之过急
您的位置:首页 >资讯 > 财经 >

Teradata CTO谈数据分析的未来

2019-07-11 15:11:43   来源:亿欧

“未来,大数据这个词或许会消失,取而代之的是‘数据’或者‘所有数据’,但数据分析会一直存在。”【编者按】在2018Teradata全球用户大会上,全美排名第四的CTO、天睿公司首席技术官、全球数据仓库技术专家Stephen Brobst发表了名为《数据分析的未来》的演讲,他认为,未来大数据或消失,公民数据科学家很危险。文章转载自大数据文摘,经亿欧整理编辑发布,供业内人士参考。全美排名第四的CTO、天睿公司首席技术官、全球数据仓库技术专家Stephen Brobst在2018 Teradata全球用户大会上发表了名为《数据分析的未来》的演讲。他指出,未来大数据这个词可能会消失,我们将迎来“全量数据时代”;此外,数据分析的统计知识非常重要,只依靠技术工具进行据分析的业务领域专家非常危险。Stephen指出,未来的数据分析将呈现以下四个基本特点。

从大数据思维到全量数据思维

Stephen提出的未来数据分析第一个趋势,是从大数据思维向全量数据思维的转变。

天睿公司首席技术官、全球数据仓库技术专家Stephen Brobst

未来,数据的量级已经不再是衡量数据分析的最重要指标,最重要的价值将来自全量数据分析,整体数据的整合。

“未来,大数据这个词或许会消失,取而代之的是【数据】或者【所有数据】,但数据分析会一直存在。”

他指出,

无独有偶,在刚刚结束的百度世界大会上,李彦宏也提出了百度的全量数据思维。他指出,互联网时代和人工智能时代最大的不同,就是在数据分析上,到底是用抽样方式还是全量数据获取分析方式。

而显然,后者更加符合当前时代的发展特点,特别是在一些特别的应用场景比如说智能交通领域,用全量实时的数据来感知交通实际情况,城市每一辆车所在具体位置,每一个红绿灯口有多少辆车,这些车移动的方向等等。通过对这些情况进行全局调整,可以大幅度提升城市交通运营效率。

AI思维的智能交通,具备全面感知、全局决策、实时控制的特点,可以大幅度提升城市交通效率,改善人们的生活体验,大大提高人们的幸福感。

新的分析技术将拓宽分析界限

斯坦福大学教授李飞飞曾公开表示:人工智能、机器学习仍然是一个进入门槛高的领域,需要大量专业知识和资源,而很少有公司自己能负担得起这些资源。今天,虽然AI能为企业提供无数的益处,但由于资源稀缺,多数企业还无法开发个性化的模型。

越来越多的数据分析技术在算法自动化上的设置也显然是奔着解决这一痛点而来。从谷歌的AutoML到Teradata最新产品下一代分析平台Teradata Vantage,自动化的分析工具正在让智能分析的门槛变低,界限变广。

那么,高质量的数据分析工具是否会降低使用者对于数据和数据人才的重视程度呢?

“高质量的数据仍然非常重要”,针对这一问题,Stephen告诉大数据文摘,现在尽管分析工具越来越智能,但他们的使用前提依然是没有偏向(bias)的数据,和懂得这些数据的专业人士。

“深度学习算法实际上非常适合处理数据质量问题。很多公司现在用无监督学习的反馈循环来解决数据质量问题,但我们还是希望,在数据搜集的过程中就尽量最小化数据偏见。数据科学没有魔法,它不是一个工具就可以解决的问题。你可以通过一些步骤来测试有偏见的数据,但这是件很微妙的事情。”

“你必须雇用那些知道自己在做什么的人。”Stephen称,业内现在存在很多只懂业务、不懂统计的“公民数据科学家(citizen data scientist),这是非常危险的。他们严重依赖技术工具进行数据搜集和分析,并不知道自己在做什么,“这很可能会导致严重破坏性的结果。”

智能分析需要业务场景

的确,统计知识对于数据分析举足轻重,但是这并不代表着可以忽略业务知识。

Stephen指出,未来,智能分析只是决策中非常小的一个部分,端到端的业务分析和场景都至关重要。

只有把系统部署到真实世界中用起来,拿到新的反馈、改进模型,才能获得真实场景下解决问题的思路。Stephen也指出,如何吸取和提炼这种经验也很重要,如果没有总结能力和提取能力的话,换个新问题你还是不会做。

Stephen给出了一系列人工智能和数据分析的应用代表领域,比如很重要的一个应用场景是反欺诈,有了深度学习以后,它可以很大程度上降低欺诈的情况,使欺诈行为发生得越来越少,尤其是考虑到罪犯是变换不同的欺诈手法,因此机器学习迅速的学习速度非常适合这一场景。

还有一部分美国人爱写支票,金融机构需要识别支票上的签字,因为人写字的时候写得乱七八糟,有的写得不清楚,所以识别起来还是挺不容易的。现在有了深度学习,深度学习来识别手写字体,到底是在什么地方、谁写的什么的时候,这些场景下,机器都比人要做得更好。

未来属于能将数据转化为产品的企业

“数据挖掘可以产生很多洞察,但只有生产落地才能创造真正的价值”,Stephen认为未来数据分析的第四个趋势,是技术能力必须与产品结合起来。

“在硅谷,要么你已经是一家数据公司,或者将来会成为一家数据公司,或者已经被彻底淘汰。因为大数据正在变革各个行业认识自己的方式。”

现在,通信行业不再是收取订阅费的行业,而变成了收集数据,并将数据货币化的过程。电信企业把数据收集起来,把信息递交给业务的决策者,他们就会做出更好的决策。

Stephen称,未来属于能将数据转化为产品的企业,现在我们就需要越过商业智能的思考,进入工业生产领域的思考,这样才能真正的让分析产生价值。