51CTO首页
AI.x社区
博客
学堂
精品班
软考社区
免费课
企业培训
鸿蒙开发者社区
信创认证
公众号矩阵
移动端
视频课免费课排行榜短视频直播课软考学堂
全部课程软考信创认证华为认证厂商认证IT技术PMP项目管理免费题库
在线学习
文章资源问答课堂专栏直播
51CTO
鸿蒙开发者社区
51CTO技术栈
51CTO官微
51CTO学堂
51CTO博客
CTO训练营
鸿蒙开发者社区订阅号
51CTO软考
51CTO学堂APP
51CTO学堂企业版APP
鸿蒙开发者社区视频号
51CTO软考题库
账号设置 退出

大数据

9308内容  
大数据话题包括大数据相关的最新资讯、前沿技术、使用技巧、应用案例等内容，涉及数据分析、数据可视化、商业智能、Hadoop、Spark、数据湖、数据仓库、等领域。
文章 博文帖子课程
共 9308 条
2018世界杯数据分析：梅西为什么进不了球？
在阿根廷vs冰岛一战中，梅西的表现引来无数吐槽，不仅射丢点球，全场大部分时间还在“散步”。但基于数据的分析显示，梅西即使是走路，也比大多数人跑步效果更好。他就像一台高效的机器，搞清楚了如何用最少的能量占据最有价值的场地。

2018-06-20 11:26:41

世界杯梅西数据分析
数据分析外包的利与弊
企业会将各种IT和业务功能外包给服务提供商，这就包括一些非常具有战略意义的功能。而数据分析也越来越多地成为技术领域更具竞争优势的领域之一。

2018-06-20 11:06:19

数据分析外包企业
6个人如何维护上千规模的大数据集群？
本文主要介绍饿了么大数据团队如何通过对计算引擎入口的统一，降低用户接入门槛；如何让用户自助分析任务异常及失败原因，以及如何从集群产生的任务数据本身监控集群计算/存储资源消耗，监控集群状况，监控异常任务等。

2018-06-20 09:58:36

大数据集群异常
大数据解锁传统企业面临的挑战
一些专家认为，大数据将成为市场营销的最大标志。其他人则认为大数据正在解决物流挑战。但在进行民意调查后，普遍的共识是大数据对安全和服务交付产生了最大的影响。

2018-06-20 09:24:29

大数据网络安全
阿里高德城市大脑 智慧交通战略发布 公共服务版首次亮相
6月19日，世界交通运输大会期间，国内最大的移动出行平台高德地图联手阿里云在北京发布城市大脑·智慧交通战略，城市大脑·智慧交通公共服务版也首次亮相。

2018-06-19 17:22:28

阿里高德城市大脑
【科普文】银行业9大数据科学应用案例解析
在银行业中使用数据科学不仅仅是一种趋势，它已成为保持竞争的必要条件。 银行必须认识到，大数据技术可以帮助他们有效地集中资源，做出更明智的决策并提高绩效。

2018-06-19 16:26:18

数据科学银行业机器学习
备好数据后，数据科学家还要做什么？
数据科学越来越火，很多人都想转行入坑数据科学家，这当然是好事。可是很多人都以为数据科学、机器学习等等流行词对应的工作，就是把数据塞进Sckit-Learn这个算法库里而已。

2018-06-19 09:00:25

数据科学数据算法
如何用50行代码构建情感分类器
本文介绍了如何构建情感分类器，从介绍自然语言处理开始，一步一步讲述构建过程。我们将使用亚马逊产品评论、IMDB 电影评论和 Yelp 评论来构建情感分析模型。

2018-06-19 08:35:51

情感分析数据集代码
开源一段代码-微信好友分析
今天早上翻笔记的时候，发现了一份3个月前写的代码，当时是觉得好玩写的，现在就分享出来给大家。代码的github地址我已经放在了文章尾部，需要的童鞋可以自取。

2018-06-19 08:02:00

统计程序微信
三种可视化方法，手把手教你用R绘制地图网络图！
不知道如何在地图上可视化网络图?下面这篇博客将使用R中的igraph、ggplot2或ggraph包来介绍三种在地图上可视化网络图的方法。在对地理位置以及位置的连接关系进行可视化时，还可以在图中展示一些属性。

2018-06-16 23:34:09

可视化地图R
基于Hadoop的数据分析平台搭建
随着越来越多的企业开始使用Hadoop平台，也为Hadoop平台引入了许多的技术，如Hive、Spark SQL、Kafka等，丰富的组件使得用Hadoop构建数据分析平台代替传统数据分析平台成为可能。

2018-06-15 20:44:40

Hadoop数据分析数据
最强观战指南 | Python分析热门夺冠球队（附源代码）
2018年，火热的世界杯即将拉开序幕。在比赛开始之前，我们不妨用 Python 来对参赛队伍的实力情况进行分析，并大胆的预测下本届世界杯的夺冠热门球队。

2018-06-15 11:22:52

Python分析世界杯
WGDC2018“空间大数据+海洋大数据”峰会顺利召开
6月14日，由泰伯网主办的“WGDC2018地理信息开发者大会”在北京国家会议中心隆重举行。作为海洋信息化领域排头兵企业，星天科技应邀参加并承办大会首届“空间大数据+海洋大数据”峰会专题论坛，并在大会的展览展示区安排展位作精彩展示。

2018-06-14 21:59:54

WGDC大数据
从跨界到融界，四维图新深耕位置大数据发布MineData 2.0
2018年6月14日，时隔一年，四维图新再一次亮相北京国家会议中心，举办了以“融界”为主题的四维图新位置大数据平台MineData 2.0发布会。

2018-06-14 21:21:33

大数据MineData 2.
空间智能驱动万物互联 WGDC 2018大会成功召开
今日，由领先的空间科技媒体&创新创业服务平台泰伯网主办的WGDC 2018全球地理信息开发者大会在北京国家会议中心成功拉开帷幕。

2018-06-14 21:15:24

空间智能 WGDC
未来公务员都会是数据分析高手了，你还要当个只会Excel的小白吗？
据外媒报道，新加坡2万公务员将在未来5年内接受数据分析培训，新加坡政府已任命首席数据战略官员，领导实现政府各部门的数据化计划。大数据时代，公务员们都得是“数据”高手!数据分析在新加坡已经是最热门的职业，也是应届生们的首选职业之一。

2018-06-14 15:22:54

大数据数据分析职业
为什么说 Java 程序员到了必须掌握 Spring Boot 的时候？
说起 Spring Boot 我们不得不先了解一下 Spring 这个企业，不仅因为 Spring Boot 来源于 Spirng 大家族，而且 Spring Boot 的诞生和 Sping 框架的发展息息相关。

2018-06-13 16:08:34

Java Spring Boo程序员
2018年值得关注的5个大数据趋势
据调研机构Forrester Research最近发布的营销报告，随着组织的领导者开始意识到大量使用大数据技术所需的工作量，人工智能(AI)正在超越其流行术语的阶段。研究报告指出，实施人工智能来实现目标需要精确的部署、规划和治理。尽管如此，该报告预测随着大数据趋势进一步倾向于人工智能，该技术将有巨大的改进。

2018-06-13 15:04:43

大数据趋势人工智能
2018年世界杯冠军竟然被大数据算出来了，还要比吗？
2018年俄罗斯世界杯快来了，今年的大力神杯又将花落谁家?想必每个球迷心中都有自己的答案。但是对于那些银行家、投资商们来说，想要预测冠军，光靠一片热诚之心、以及对足球技术的理解，是不够的。他们要的是数据。

2018-06-13 14:59:11

大数据世界杯冠军
3D打印与大数据会碰撞出什么样的火花？
现如今，投资界纷纷将目光聚焦在移动互联网应用、互联网金融以及智能穿戴设备等项目，似乎它们将是一批风口上的“猪”。而小编将要阐述和挖掘的这座金矿，就是一头能真正能飞起来的“猪”——以3D打印和大数据为基础的分布式制造。这种制造模式将彻底打通互联网业和制造业，给人类带来深刻的社会变革。

2018-06-13 13:25:01

3D打印大数据工业革命
大数据+人工智能 双擎驱动企业数字化转型 原创
数字化时代，大数据及人工智能成为驱动企业业务增长的技术引擎，数字化转型也已成为企业生存和发展的必修课。全球领先的数据和分析解决方案供应商Teradata天睿公司，也在加速其在大数据及人工智能领域的布局，适时推出了Teradata Everywhere及AI战略，强化Teradata分析平台(Teradata Analytics Platform)，助力客户加速数字化转型。

2018-06-13 10:55:55

大数据人工智能Teradata
Airbnb首席架构师李聪：IT系统架构设计应充分考虑用户隐私 原创
针对当前信息安全问题频发的现状，李聪认为原因有三：一是隐私相关的法律法规不够健全，尚未引起足够重视;二是中小型企业没有花费太多的人力、物力和财力去做这件事，导致了一些隐私事件的发生;三是有了健全的隐私机制后，仍然会有一部分人利用隐私漏洞去做一些不好的事情。

2018-06-13 09:25:27

IT系统架构隐私李聪
Hadoop HBase存储原理结构学习
hbase是bigtable的开源山寨版本。是建立的hdfs之上，提供高可靠性、高性能、列存储、可伸缩、实时读写的数据库系统。

2018-06-13 08:53:39

HadoopHBase存储
2018数据科学和机器学习调查:Hadoop被抛弃!
近日，著名数据科学网站 KDnuggets 发布了 2018 年数据科学和机器学习工具调查结果。超过 2000 人对自己「过去 12 个月内在项目开发中使用过的数据挖掘/机器学习工具和编程语言」进行了投票。该统计还对过去三年来的排名进行了对比分析。

2018-06-12 16:27:45

数据科学机器学习Hadoop
HBase从入门到精通系列：误删数据如何抢救？
有时候我们操作数据库的时候不小心误删数据，这时候如何找回？mysql里有binlog可以帮助我们恢复数据，但是没有开binlog也没有备份就尴尬了。如果是HBase，你没有做备份误删了又如何恢复呢？

2018-06-12 11:01:55

HBase误删数据
教机器遗忘或许比学习更重要：让AI健忘的三种方式
现在，数据科学家们正在尝试应用神经科学原理来改进机器学习，并且坚信人类大脑能够解锁图灵完备的人工智能。

2018-06-12 00:33:20

AI机器学习人工智能
上海人才大数据：上下班1小时，年薪30万
近日，一部电视剧《上海女子图鉴》将“上海中高端人才”推上了热议话题，也引起了很多人对上海中高端人才的关注。为了满足公众对这个群体的好奇心，5月25日，我们发布了《2018年上海中高端人才及沪漂大数据报告》(以下简称“报告”)。报告发现，上海中高端人才净流入率位居全国城市第11名。

2018-06-11 16:26:09

上海高端人才报告
三招提升数据不平衡模型的性能（附python代码）
针对数据不平衡问题有相应的处理办法，比如对多数样本进行采样使得其样本数量级与少样本数相近，或者是对少数样本重复使用等。最近恰好在面试中遇到一个数据不平衡问题，这也是面试中经常会出现的问题之一，现向读者分享此次解决问题的心得。

2018-06-11 16:20:22

数据不平衡数据集算法
从人脸识别到情感分析，这有50个机器学习实用API！
还在为找不到机器学习的API而烦恼吗?本篇文章将介绍一个包含50+关于人脸和图像识别，文本分析，NLP，情感分析，语言翻译，机器学习和预测的API列表。

2018-06-10 08:35:30

机器学习API脸识别
10本必读的机器学习和数据科学免费在线电子书
KDnuggets 网站编辑 Matthew Mayo 挑选了一些机器学习和数据科学相关的书籍。是时候让你的书架上新增几本机器学习和数据科学书籍了，最重要的是这些书籍全部有免费的电子版!!!

2018-06-08 16:39:53

机器学习数据科学书籍
Kaggle 20G数据集强势分析“绝地求生”，科学吃鸡攻略拿走不谢！
在吃鸡的过程中你是否捧着手机战战兢兢，一会儿激动得起飞、一会儿手抖得厉害;是否有过落地3分钟就被毙、跑不过毒倒在半路上失血致死、站在草丛中被不明方向的子弹狙击而亡、出门舔箱被猪队友当作敌人干掉……想游戏里活得更久怎么办，大数据分析来帮你。

2018-06-08 16:33:34

大数据游戏吃鸡
数据解读：中国高校招生如何不平等？
根据清华大学校内论坛的信息，我抓取了2006到2013年间各省(即各考区)就读清华的人数。由于清华在中国高等教育中占据特殊地位，这份数据不失为探索中国高校招生地域不平等问题的起点。

2018-06-08 16:28:23

高校招生清华北大
大数据存储平台之异构存储实践深度解读
在数据被视为公司资产的时代，每个公司基本都会保存最近数年的数据，而这些数据尤其是冷数据的累积也给存储平台带来了甜蜜的负担。下面就来分享下如何解决这些“负担”。

2018-06-07 16:33:31

大数据冷热数据存储平台
如何克服数据湖与客户互动分析之间的瓶颈
创建客户的完整视图，并通过最佳渠道实时互动。当今在商业领域的竞争就是了解你的客户。消费者期待个性化的服务和令人满意的体验，而与他们互动品牌无关的东西都可能导致客户选择其他品牌。

2018-06-07 16:10:08

数据湖客户互动互动分析
Python数据预处理：使用Dask和Numba并行化加速
作为旧金山大学的一名数据科学硕士，会经常跟数据打交道。使用Apply函数是我用来创建新特征或清理数据的众多技巧之一。现在，我只是一名数据科学家，而不是计算机科学方面的专家，但我是一个喜欢捣鼓并使得代码运行更快的程序员。现在，我将会分享我在并行应用上的经验。

2018-06-07 15:58:52

Python函数数据
人工智能与大数据的区别
人工智能和大数据是人们耳熟能详的流行术语，但也可能会有一些混淆。人工智能和大数据有什么相似之处和不同之处?它们有什么共同点吗?它们是否相似?能进行有效的比较吗?

2018-06-07 15:22:58

人工智能大数据比较
有些决策不能，也永远不该委托给机器
由于数据偏差、系统内置偏见，不了解统计数据以及过度信任机器的决策者，还有其他众多的挑战，算法永远不会给我们“完美”的结果。那么，在算法和你的判断产生出入时，你将在多大程度上依赖算法？

2018-06-07 07:59:40

算法机器数据分析
腾云大学与美世咨询联合发布会圆满举行，全面明确行业定义
《专业数据人才教育行业生态报告》发布会今日举行，美世咨询中国区副总裁兼战略客户部总经理乔鲁诺先生对专业数据人才市场规模与现状做出介绍；TalkingData CEO助理、腾云大学（TalkingData University）执行校长杨慧女士则对专业数据人才定义、专业数据人才教育行业生态结构等问题做出明确回答。

2018-06-06 19:14:09

TalkingData腾云大学美世咨询
当开源技术遇上大数据创新
大数据新兴技术不断涌现，让我们更容易更精准的从海量繁杂的数据中提取有用价值。开源作为一种推动大数据技术创新的新模式，正广受技术开发人员的热爱。

2018-06-06 15:00:27

开源大数据大数据项目
全球十大数据治理解决方案提供商
数据治理主要是企业内部部署的解决方案，该领域的大多数领导者都是一些传统的软件公司，其中大部分的企业已经在某种程度上向云端过渡。而Gartner公司认为，未来几年，数据治理也将转向云计算。

2018-06-06 14:39:04

大数据数据中心云环境
人工智能与大数据的完美结合
人工智能(AI)已经存在几十年了。然而，最近随着“大数据”的出现，它得到了越来越多的关注。那么，大数据为什么会引起对人工智能的关注呢?答案很简单，人工智能可以用传统人类无法处理的方式来处理大数据集。

2018-06-06 14:21:36

人工智能大数据数据处理
干货 ：基于用户画像的聚类分析
聚类(Clustering)，顾名思义就是“物以类聚，人以群分”，其主要思想是按照特定标准把数据集聚合成不同的簇，使同一簇内的数据对象的相似性尽可能大，同时，使不在同一簇内的数据对象的差异性尽可能大。通俗地说，就是把相似的对象分到同一组。

2018-06-06 14:17:44

聚类分析算法大数据
避免数据备份中的7大风险
如今，全球各地的组织和个人所存储和传输的数据量激增。数据已经无处不在，随着文件规模的增加，其倍增的速率正在快速增长，需要备份的数据比以往更多。

2018-06-06 14:15:12

数据备份勒索软件数据
Kafka解惑之时间轮 (TimingWheel)
Kafka中存在大量的延迟操作，比如延迟生产、延迟拉取以及延迟删除等。Kafka并没有使用JDK自带的Timer或者DelayQueue来实现延迟的功能，而是基于时间轮自定义了一个用于实现延迟功能的定时器(SystemTimer)。

2018-06-06 10:14:32

Kafka时间轮任务
开源模式下的云计算和大数据现状
开源云计算带来的好处很多，其中最吸引人的就是可以帮助企业降低成本。另外，开源模式消除了供应商的限制和壁垒，并且可让技术变得更加协作，合作者会不断更新开源软件，使该技术得到持续的完善和发展。

2018-06-06 10:06:05

云计算大数据开源
还不收藏？Spark动态内存管理源码解析！
Spark有两种内存管理模式，静态内存管理(Static MemoryManager)和动态（统一）内存管理（Unified MemoryManager）。动态内存管理从Spark1.6开始引入，在SparkEnv.scala中的源码可以看到，Spark目前默认采用动态内存管理模式，若将spark.memory.useLegacyMode设置为true，则会改为采用静态内存管理。

2018-06-06 08:28:37

Spark内存管理
数据开启基础设施现代化之门
实现数字化转型的致胜点在于业务和技术的完美结合，而云在其中扮演着一个至关重要的角色——数字化转型的基石。目前，大多数企业正处于传统架构和新型IT架构并存的状态，在上云的道路上，众多企业采用了多云部署的策略，即采用超过一家的云服务商来构建和提供云服务。

2018-06-05 13:43:49

数据基础设施
大数据分析系统Hadoop的13个开源工具
Hadoop是由Apache基金会开发的一个大数据分布式系统基础架构，最早版本是2003年原Yahoo!DougCutting根据Google发布的学术论文研究而来。

2018-06-05 12:06:20

Hadoop开源工具
数据科学“内战”：统计vs.机器学习
和武侠世界里有少林和武当两大门派一样，数据科学领域也有两个不同的学派：以统计分析为基础的统计学派，以及以机器学习为基础的人工智能派。而本文将从数据科学的研究目标和挑战聊起，用几个简单的例子，对比数据科学圈这两大门派之争。

2018-06-05 11:30:22

数据科学机器学习统计学
零售业强竞争，大数据如何帮助弱者角逐
大数据时代，数据分析已经渗透到各行各业，这里也包括零售行业。目前，各大中小型零售商都在努力为客户提供更好的购物体验，用有限的预算为顾客提供满意的服务。零售商业内存在很强的竞争压力，不断的技术创新使得行业景观变化迅速。

2018-06-05 11:20:33

大数据人工智能零售
上一页 1 ··· 101102103104105 ··· 187
点赞

51CTO技术栈公众号

业务
速览
在线客服