-
数据百问系列:什么是 ETL ?ETL 的常见技术措施是什么?
所属栏目:[大数据] 日期:2021-08-22 热度:89
0x00 前言 三年前写过一篇ETL的文章,最近又被小伙伴问到了,因此略作整理放进数据百问系列。 虽然已经过去两三年了,ETL 领域的一些组件也都有了一些更新,但是整体来看设计的理念变化不是特别大(比如实时处理以前流行的是Spark Streaming,现在流行 Flink[详细]
-
数据分析能源成本管理中发挥着强大影响
所属栏目:[大数据] 日期:2021-08-22 热度:135
调研机构EnergySage公司最近发布的一份研究报告表明,过去十年来,消费者的电费急剧上升。好消息是,技术进步可以帮助缓解这些成本的不断上升。大数据技术可以帮助消费者摆脱成本上涨的压力。但是,消费者和公用事业公司需要知道如何正确使用大数据技术。 大[详细]
-
大数据在疫情期间对货运运营商的安全非常关键
所属栏目:[大数据] 日期:2021-08-22 热度:130
大数据在许多方面都至关重要,在疫情期间,大数据已对货运运营商的安全产生了重大影响。 大数据对于避免许多危机非常重要。采用大数据应对冠状病毒疫情危机是一个很好的例子。越来越多的国家和组织正在使用大数据来促进社交距离,加强联系追踪并找到新的治疗[详细]
-
数据科学家vs数据分析师,到底有啥不同?
所属栏目:[大数据] 日期:2021-08-22 热度:133
数据科学和机器学习两个领域很容易混淆,从职责描述上还是大家的普遍印象里,这两个职位都差不多。相较之下,数据科学和数据分析这两个职位更容易区分。它们虽有关键差别,但也有相似之处。 有人会说,要成为一名数据科学家,要先从数据分析的工作做起。 作[详细]
-
社交大数据如何促进社会风险治理?
所属栏目:[大数据] 日期:2021-08-22 热度:197
当前,社会风险出现了复杂化、多元化及动态化等新特点。不仅网络内容生态趋于复杂,国际间因疫情、贸易以及各类突发事件形成的风险议题也层出不穷。风险治理面临前所未有的挑战,也引发从政府、学界、再到业界与民间的广泛关注。新形势下的风险治理迫切需要[详细]
-
数据科学的现在与前景
所属栏目:[大数据] 日期:2021-08-22 热度:103
数据科学是截至近年来技术领域中很具热度的方向之一。如果您拥有数据科学或者相关专业的工作经验及学位,那么只要大笔一挥、简历一发,一份薪酬可观的职位就会应手而得。但是,数据科学家能成为AI领域的长青树吗?或者说,几年之后围绕数据科学出现的这股热流[详细]
-
如何通过流程挖掘革新业务流程
所属栏目:[大数据] 日期:2021-08-22 热度:82
流程挖掘可以帮助组织收集有洞察力的数据,以评估整个公司业务流程的可靠性、效率和生产力。 流程挖掘的定义 流程挖掘是一种方法,通过这种方法,组织可以从现有的系统中收集数据,以客观地可视化业务流程是如何运行的,以及如何改进它们。从流程挖掘中获得[详细]
-
调查发现商业智能和数据分析的应用在疫情期间发挥了关键作用
所属栏目:[大数据] 日期:2021-08-22 热度:182
根据大数据开发商Sisense公司进行的一次调查,受访者表示,与冠状病毒疫情发生之前相比。现在对数据分析应用的依赖程度更高,小型企业占主导地位。 这项调查表明,商业智能和数据分析专家对商业智能和数据分析在冠状病毒疫情蔓延期间和之后将发挥的作用仍然[详细]
-
小城市建设大数据中心,如何防止“晒太阳”?
所属栏目:[大数据] 日期:2021-08-22 热度:60
落户草原云谷,挺进世界屋脊,伴随今年政府工作报告给新基建吹来新风,我国大数据中心产业近期迎来又一轮发展高潮。 3 加强新型基础设施建设,发展新一代信息网络,拓展5G应用,建设大数据中心,增加充电桩、换电站等设施,推广新能源汽车,激发新消费需求、[详细]
-
如何采用大数据革新供应链
所属栏目:[大数据] 日期:2021-08-22 热度:99
医疗供应链管理是一个复杂的过程,只有借助大数据技术才能有效地进行管理。很多组织正在使用大数据技术来确保可靠的交付和战略性资源分配。数据分析厂商Data Systems International(DSI)公司是行业领先企业之一,拥有40年经营和发展历史。 DSI公司为医疗供应[详细]
-
深入认识Apache Spark窗口功能
所属栏目:[大数据] 日期:2021-08-22 热度:80
窗口函数对数据组进行操作,并为每个记录或组返回值 深入了解Apache Spark窗口功能 Photo by Tom Blackout on Unsplash 在此博客文章中,我们将深入探讨Apache Spark窗口函数。 您可能也对我之前有关Apache Spark的帖子感兴趣。 使用Apache Spark开始您的旅[详细]
-
以大数据克服5G网络安全的新挑战
所属栏目:[大数据] 日期:2021-08-22 热度:55
伴随5G技术的应用与发展,从智慧城市的水力、电力、政务等公共事业,到个人生活领域的智能医疗设备、自动驾驶汽车等,5G使得城市的生产方式与运转模式面临一次颠覆性的变革,不仅带来便利,也带来了新的网络安全挑战。 众所周知,5G技术的典型特征是高带宽、[详细]
-
后疫情世界的城市医疗大数据,需要怎样的建设“方法论”?
所属栏目:[大数据] 日期:2021-08-22 热度:181
城市级健康医疗大数据体系建设,是一个很宏大的命题。 《健康中国2030规划纲要》明确将发展健康产业作为健康中国建设五大任务之一,并提出将健康产业发展成为国民经济支柱性产业的战略目标:2020年健康服务业总规模达到8万亿,到2030年达到16万亿,全年GDP占[详细]
-
数据管理是企业获得竞争优势的重要方式
所属栏目:[大数据] 日期:2021-08-22 热度:93
据云数据管理公司Rubrik委托IDC进行的最新研究。该研究的重点是数据蔓延以及IT组织如何准备应对。 IDC发现,超过80%的IT领导者表示数据蔓延是其组织今天必须解决的关键问题之一。 什么是数据蔓延? 数据蔓延(Data Sprawl)是指企业每天产生的大量数据和各种数[详细]
-
大数据分析革新保险行业的6种方式
所属栏目:[大数据] 日期:2021-08-22 热度:96
科技对保险行业的运营方式产生了重大影响。尽管大数据分析即服务仍然是一种很新的技术,但对于保险公司来说至关重要。随着保险公司增加其数据库中的投保者数量,对其更具意义的分析需求变得越来越重要。而大数据分析应用程序将使这项任务可行。 大数据技术有[详细]
-
大数据如何为助农扶贫助力?
所属栏目:[大数据] 日期:2021-08-22 热度:197
如果你看过今年的热门综艺《向往的生活》,你一定会记得这样一幕:当红主播薇娅通过网络直播,帮助西双版纳的一家果干加工厂售卖因为疫情而滞销的果干,在这场近2000万人观看的直播中,所有的产品在上架后就立刻售罄,一共创造了570万元人民币的收入。 薇娅[详细]
-
将数据变成资产的五个基本流程
所属栏目:[大数据] 日期:2021-08-22 热度:137
数据分析公司Verisk Analytics的首席信息官Nick Daffan谈谈如何吸引数据科学家,如何快速取得成果,以及如何提供灵活的技术,这些都是您数据策略的关键。 在全球最大的数据分析公司之一担任首席信息官,Nick Daffan对于如何将数据转化为有价值的资产了解很多[详细]
-
影响数据分析获得成功的四大原因
所属栏目:[大数据] 日期:2021-08-22 热度:119
强大的数据分析是数字业务的当务之急,这一切都始于数据治理,正确的策略以及对具有数据意识的文化的重视。 《2020年首席信息官现状调查》指出,数据和分析仍然是数字时代企业的重中之重,IT领导者中有37%的人指出,今年数据分析将先于安全和风险管理成为其[详细]
-
我国主导的两项大数据国际标准即将正式推出
所属栏目:[大数据] 日期:2021-08-22 热度:196
2020年6月22日-7月3日,国际电信联盟第十六研究组(简称ITU-T SG16)召开全体会议,来自中国、美国、德国、日本、韩国、巴西、瑞士、加拿大、英国等国家和世界卫生组织等国际组织的代表参加了此次为期一周的在线会议。 会上,由中国信息通信研究院提出的ITU-T[详细]
-
成为数字赢家的法宝是数据
所属栏目:[大数据] 日期:2021-08-22 热度:82
组织别无选择,只能不断创新,并寻找新的方法来取悦客户。 在当今这个不确定的时代,除了不断创新,别无选择。与其他人相比,您唯一拥有的可持续优势是灵活性,仅此而已。因为没有别的东西是可持续的,您创造的所有东西,都会被别人模仿。Amazon.com创始人兼[详细]
-
介绍数字化转型的10个大数据用例
所属栏目:[大数据] 日期:2021-08-22 热度:109
我们甚至可能没有意识到我们的数字足迹对全球大数据的贡献有多大。 根据AnalyticsInsights的估计,这项神秘技术的市场规模预计将在2023年达到3015亿美元,高于2020年的1935亿美元,在2019-2023年的预测期内复合年增长率为10.9%。大数据越来越多地用于日常营[详细]
-
大数据的作用体现在哪几个方面?
所属栏目:[大数据] 日期:2021-08-22 热度:134
什么是大数据 大数据技术的战略意义不在于掌握庞大的数据信息,而在于对这些含有意义的数据进行专业化处理。换而言之,如果把大数据比作一种产业,那么这种产业实现盈利的关键,在于提高对数据的加工能力,通过加工实现数据的增值。 随着云时代的来临,大数[详细]
-
数据可视化的4个支柱:分布,关系,组成,对照
所属栏目:[大数据] 日期:2021-08-22 热度:174
数据可视化原理 几个世纪以前,科学家没有用相机在显微镜下拍摄遥远星系或微小细菌的照片。 图纸是传达观察,思想甚至理论的主要媒介。 实际上,对于科学家来说,能够绘制抽象思想和物体的能力是一项必不可少的技能(请查看William Playfair从1700年代开始的[详细]
-
成功应用大数据和AI的四个关键事项
所属栏目:[大数据] 日期:2021-08-22 热度:80
大数据技术如今已经成为全球主要的营销工具之一,这已不是什么秘密。 在这个快速变化和发展的时代,各行业组织之间的竞争比以往任何时候都要激烈,并致力于在当今互联互通的世界中提高基准、环境水平、投资回报率、利润率。大数据分析和咨询服务已经存在多年[详细]
-
大数据网管运营数据存储模式分析
所属栏目:[大数据] 日期:2021-08-22 热度:56
随着近两年通信流量业务开展得如火如荼,更多的用户上网行为的数据分析需求猛增,而处理这类数据需要大量的写入处理,而且字段不固定,传统的关系型数据库已无法满足需求,急需多节点的分布式大数据集群来解决数据处理及存储问题。 本研究构建了一套大数据采[详细]
