数据
-
大数据开发：分布式文件存储系统简介
大数据开发：分布式文件存储系统简介在分布式存储技术体系当中，分布式文件存储是其中的分类之一，也是大数据架构当中常常用到的。得益于Hadoop的高人气，Hadoop原生的HDFS分布式文件系统，也广泛为人所知。但是分布式文件存储系统，并非只有HDFS。今天的大数据开发分享，我们就主要来讲讲常见的分布式文件存储系统。分布式文件系统，可以说是分布式系统下的一个子集，这里我们选取市场应用比较广泛的几款产品，HDFS、Ceph、FastDFS以及MooseFS来做简单的分析——HDFS如上所说，HDFS是分布式文件系统当中人气非常
-
2021年 全网最细大数据学习笔记（一）：初识 Hadoop
2021年 全网最细大数据学习笔记（一）：初识 Hadoop文章目录一、大数据1、大数据的定义2、大数据的特点3、大数据行业应用4、Hadoop与大数据5、其他大数据处理平台6、大数据人才三、一、大数据随着近来计算机技术和互联网的发展，大数据这个名词越来越多地进入到我们的视野中，大数据的快速发展也无时刻影响着我们的生活。1、大数据的定义大数据从字面来理解就是大量的数据。日常生活离不开数据，可以说每时每刻都在产生着数据。例如，一分钟可以做些什么事呢？在日常生活中，一分钟可能连一页书都看不完。但是一分钟内产生的数据却是庞大的。据统计，在一分钟内，YouTu
-
MySQL删除表数据 MySQL清空表命令 3种方法
MySQL删除表数据 MySQL清空表命令 3种方法一、MySQL清空表数据命令：truncateSQL语法：truncatetable表名注意：不能与where一起使用。 truncate删除数据后是不可以rollback的。 truncate删除数据后会重置Identity（标识列、自增字段），相当于自增列会被置为初始值，又重新从1开始记录，而不是接着原来的ID数。 truncate删除数据后不写服务器log，整体删除速度快。 truncate删除数据后不激活trigger(触发器)。二、MySQL删除表命令：
-
大数据到底应该如何学？
大数据到底应该如何学？本文关键字：大数据专业、大数据方向、大数据开发、大数据分析、学习路线。笔者从事大数据开发和培训多年，曾为多家机构优化完整大数据课程体系，也为多所高校设计并实施大数据专业培养方案，并进行过多次大数据师资培训、高校骨干教师学习交流，希望自己的一点粗浅认识能够帮助到大家。
-
python常见的数据类型有哪些？
python常见的数据类型有哪些？变量用来存储数据，那么大家有没有想过，我们应该让变量占用多大空间，保存什么样的数据呢?在讲解变量的类型之前，我们先来看一个生活中的例子，例如，我们要运送一台电脑，大卡车和小轿车都可以完成，但是，如果使用大卡车运送一台电脑，显然有点小题大做，浪费了大卡车的空间，如图1所示。图一：卡车和轿车运输一台电脑同理，如果使用变量存储数据时，为了更充分利用内存空间，我们可以为变量指定不同的数据类型。Python中常见的数据类型如图2所示图二：Python变量数据类型图二中罗列了Python中常见的数据类型，下
-
数据可视化与大数据分析
数据可视化与大数据分析 商业智能通常被理解为将企业中现有的数据转化为知识，帮助企业做出明智的业务经营决策的工具。而数据分析是商业智通的途径之一，而大数据分析的结果可视化，对经营决策将起着关键作用。 数据可视化软件可以让数据分析师和业务用户利用图表、图形传达信息，帮助读者更加直观地理解数据背后的故事。但试图基于数据可视化来讲述故事的时候，你必须小心，特别是当你长时间沉浸在分析工作中受到熟悉内容蒙蔽的时候。要确…
-
[原创]-数据仓库ETL开发
[原创]-数据仓库ETL开发ETL开发概述ETL是数据仓库的后台，主要包含抽取、清洗、规范化、提交四个步骤，传统数据仓库一般分为四层模型。分层的作用：1.划分ETL阶段工作重心，便于管理2.降低开发和维护成本3.减…
-
数据分析 — 五力模型 VS PEST（分析模型）VS SWOT分析法[通俗易懂]
数据分析 — 五力模型 VS PEST（分析模型）VS SWOT分析法[通俗易懂]一、五力模型：1．供应商的讨价还价能力2．购买者的讨价还价能力3．新进入者的威胁4．替代品的威胁5．行业内现有竞争者的竞争二：PEST模型政治环境（PoliticalFactors）经济环境（EconomicFactors）社会环境（SocialandculturalFactors）技术环境（TechnologicalFactors）三、SWOT模型…
-
大数据建模流程之任务分析
大数据建模流程之任务分析上一篇文章我们简单阐述了，大多数研究者在进行大数据分析时，所存在的逻辑问题，并简明扼要的对大数据建模流程进行了说明，那么为了使大家更加清晰每一个步骤的具体内容，我们将每一个模块展开分析。详细阐述流程中具体要做的工作内容？一．宏观角度无论是大数据还是人工智能技术，其实都是需求或者项目主题的实现手段，商业上希望技术能够将产品向商品转化，或者对市场进行科学的分析，从而引导公司决策更符合市场需求；科研上希望技术能够进行多学课融合，使得科研结果更具有说服力，亦或者是技术本身的创新与变革，使得科技文明不断发展。由此
-
