大数据（BIG DATA）是指无法在一定时间范围内用常规软件工具进行捕捉、管理和处理的数据集合，是需要新处理模式才能具有更强的决策力、洞察发现力和流程优化能力的海量、高增长率和多样化的信息资产。大数据的5V特点：VOLUME（大量）、VELOCITY（高速）、VARIETY（多样）、VALUE（低价值密度）、VERACITY（真实性）。为什么要学习大数据？目前，全球数据呈现爆发增长、海量集聚的特点。大数据计算技术完美地解决了海量数据的收集、...
85
作为数据科学家，我想把行业新的知识图谱总结并分享给技术专家们，让大数据知识真正转化为互联网生产力！大数据知识图谱实战经验总结大数据与人工智能、云计算、物联网、区块链等技术日益融合，成为全球最热的战略性技术，给大数据从业者带来了前所未有的发展机遇，同时也对大数据工程师提出了高标准的技能要求。大数据具有海量性、多样性、高速性和易变性等特点，映射到大数据平台建设要求，不仅要具备海量数据采集、并行存储、灵...
45
前言阶段：什么是大数据？什么是人工智能？本阶段不需要编程，很多人听过大数据，听过人工智能，听过数据挖掘。但是几乎都有疑问：什么是大数据？什么是人工智能？大数据和人工智能能做什么？等等。这一阶段主要是答疑解惑，让大家明白这些概念，至少在和高端人士茶余饭后谈论大数据和人工智能的时候可以不需要“一脸懵逼”。 如果已经对大数据和人工智能了解很透彻，可以跳过直接进入第一阶段。第一阶段：linux 系统这章是基础课程...
46
5G的到来将催生万物互联，从互联网到移动互联网再到5G物联网，全新的生产生活方式即将到来；5G的市场规模过万亿，大数据、人工智能、自动驾驶、物联网、云计算、AR/VR等将基于5G得到更长足的发展，这就导致对大数据人才的需求越来越大，而大数据人才的培养周期相对较长，导致了大数据人才短缺，市场供不应求，预测到2025年全国大数据核心人才缺口达230万人。所以也就出现了大数据开发工程师、数仓工程师、ETL工程师......这些岗位...
45
大数据学习路线java(Java se,javaweb)Linux(shell,高并发架构,lucene,solr)Hadoop(Hadoop,HDFS,Mapreduce,yarn,hive,hbase,sqoop,zookeeper,flume)机器学习(R,mahout)Storm(Storm,kafka,redis)Spark(scala,spark,spark core,spark sql,spark streaming,spark mllib,spark graphx)Python(python,spark python)?云计算平台(docker,kvm,openstack)一、Linuxlucene： 全文检索引擎的架构solr： 基于lucene的全文搜索服务器，实现了可配...
48
大数据是眼下最带感的技术名称之一，大数据行业的火爆发展也自然也衍生出了一些与大数据相关的职业，比如互联网数据分析师、数据工程师等等，通过对数据的挖掘分析来影响企业的商业决策已屡见不鲜。这类职业的人群在国外被叫做数据科学家（Data Scientist），这个头衔最早由D.J.Pati和Jeff Hammerbacher于2008年提出，他们后来分别成为了领英（LinkedIn）和Facebook数据科学团队的负责人。而数据科学家这个职位目前也已经在美国传...
37
1. hadoop 生态概况Hadoop是一个由Apache基金会所开发的分布式系统基础架构。用户可以在不了解分布式底层细节的情况下，开发分布式程序。充分利用集群的威力进行高速运算和存储。具有可靠、高效、可伸缩的特点。Hadoop的核心是YARN,HDFS和Mapreduce下图是hadoop生态系统，集成spark生态圈。在未来一段时间内，hadoop将于spark共存，hadoop与spark都能部署在yarn、mesos的资源管理系统之上在这里还是要推荐下我自己建的大数据学习交...
24
我们都知道大数据技术是未来10~20年的企业核心竞争力。前言跟大家所有coder一样，技术栈主要有C++、java和php，从事过地铁AFC系统，系统服务，设备驱动，cos，商城系统后台等开发，但是未来10年，靠语言和开发经验优势来提升的空间会越来越低，所以现在就要果断的像大数据技术看齐。那么我在这个转型的过程中，遇到了N多的坑，最苦恼的是没有一个系统的，step-by-step的想要在大数据这个领域汲取养分，让自己壮大成长。分享方向，...
40
终于有人把云计算、大数据和人工智能讲明白了！
今天跟大家讲讲云计算、大数据和人工智能。这三个词现在非常火，并且它们之间好像互相有关系。一般谈云计算的时候会提到大数据、谈人工智能的时候会提大数据、谈人工智能的时候会提云计算……感觉三者之间相辅相成又不可分割。但如果是非技术的人员，就可能比较难理解这三者之间的相互关系，所以有必要解释一下。在这里还是要推荐下我自己建的大数据学习交流群:199427210，群里都是学大数据开发的，如果你正在学习大数据 ，小编欢迎...
7716
大数据（二）大数据相关的技术想要在大数据这个领域汲取养分，让自己壮大成长。分享方向，行动以前先分享下一个大数据交流分享资源群870097548，欢迎想学习，想转行的，进阶中你加入学习。1. 云技术大数据常和云计算联系到一起，因为实时的大型数据集分析需要分布式处理框架来向数十、数百或甚至数万的电脑分配工作。可以说，云计算充当了工业革命时期的发动机的角色，而大数据则是电。云计算思想的起源是麦卡锡在上世纪 60 年代提...
38
红包分享
钱包管理
