如何通俗地理解Hive的工作原理？

2023-03-23

Hive是一个基于Hadoop的数据仓库工具，可以让用户通过类SQL语言查询和分析大规模的分布式数据集。下面将介绍Hive的工作原理及其通俗易懂的解释。 首先，我们需要了解Hadoop和MapReduce的概念。Hadoop是一个开源的分 ...

MapReduce和Spark的区别是什么？

2023-03-23

MapReduce和Spark是两个广泛使用的分布式计算框架，用于处理大规模数据。虽然它们都可以在大数据集合上运行，但它们之间有一些关键区别。 MapReduce最初由Google开发，旨在通过分布式计算来处理大数据集。它将任务分 ...

如何保持mySQL和redis中数据的一致性？

2023-03-22

保持MySQL和Redis中数据的一致性是一个非常重要的问题，因为这直接影响到应用程序的正确性和稳定性。在本文中，我将从以下几个方面来介绍如何保持MySQL和Redis中数据的一致性。 数据同步 在MySQL和Redis之间保持数 ...

HBase 和 Hive 的差别是什么，各自适用在什么场景中？

2023-03-22

HBase和Hive都是在Hadoop生态系统中常用的数据存储和分析工具，它们各自具有独特的特点和适用场景。本文将从以下几个方面探讨HBase和Hive的差别和使用场景。 数据模型 HBase是一种基于列族的NoSQL数据库，它以行为 ...

elasticsearch如何结合mySQL一起使用？

2023-03-21

Elasticsearch是一个开源搜索引擎，可以快速地搜索和分析大规模的数据。MySQL是一个广泛使用的关系型数据库管理系统。结合Elasticsearch与MySQL一起使用，可以使得数据的搜索与查询更为高效。 以下是如何结合Elastic ...

mySQL给表增加字段会锁表，怎样才可以不锁表吗？

2023-03-21

MySQL 是一个流行的关系型数据库管理系统，被广泛用于各种应用程序中。当表需要增加新的字段时，通常会使用 ALTER TABLE 语句来完成这个任务。然而，对于大型的表，这个过程可能会导致锁表，从而影响到业务运营和 ...

python pandas如何实现两个dataframe相减？

2023-03-21

Python是一种功能强大的编程语言，它包含了许多常用的开发工具和库。Pandas是其中一个非常流行的数据处理库，它提供了各种各样的方法来处理和分析数据。 在Pandas中，相减两个DataFrame类似于执行SQL中的JOIN操 ...

mySQL 为什么不能用binlog来做数据恢复？

2023-03-15

MySQL是一种流行的关系型数据库管理系统，它提供了一个名为binlog的功能，用于记录数据库中所发生的更改。二进制日志（binlog）是MySQL中的一种日志文件，它记录了所有对MySQL数据库进行更改操作的详细信息，包括增 ...

大数据零基础学习

2022-11-07

虽说人生没有白走的路，新的一年来到，会的还是原来的知识，人的身价就摆在那里，无论怎么折腾，也不会拿到更好的offer。所以在年轻还有拼劲的时候多学学知识，寻找自身的不足，查漏补缺非常重要。今天小编给大家 ...

大数据工程师的必备技能有哪些

2022-11-07

1、大数据平台 目前很火，数据源头，各种炫酷新技术，搭建Hadoop、Hive、Spark、Kylin、Druid、Beam~，前提是你要懂Java，很多平台都是用Java开发的。 目前很多企业都把数据采集下来了，对于传统的业务数据 ...

如何成为一名数据分析师？

2022-10-24

一直以来，不少同事、朋友在问我怎么成为一个数据分析师、数据产品经理？都需要哪些知识储备？今天小亿就来为大家系统的分享一下什么是数据分析师，以及该如何快速、深入的学习这些技能与知识？ 什么是数据 ...

数据分析完整的流程与知识结构体系详解

2022-10-24

一个完整的数据分析流程，应该包括以下几个方面，建议收藏此图仔细阅读。 完整的数据分析流程：1、业务建模。2、经验分析。3、数据准备。4、数据处理。5、数据分析与展现。6、专业报告。7、持续验证与跟踪。 ...

Python数据分析使用教程

2022-10-21

关于Python数据分析，其实网上能够找到的学习资源很多，主要分为两类： 一类是提供各种资源的推荐，比如书单、教程、以及学习的先后顺序； 另一类是提供具体的学习内容，知识点或实际案例。 但很多繁 ...

资深数据分析师来聊一聊数据挖掘

2022-10-19

一、数据挖掘的层次 一直想整理下对数据挖掘不同层次的理解，这也是这两年多的时间里面，和很多金融领域、互联网做数据相关工作的小伙伴，聊天交流的一些整理和归纳。大概可以分为四类。 (一)纯粹的数据 ...

Hadoop招聘面试常见的问题和答案详解

2022-10-18

Q1.什么是 Hadoop? Hadoop 是一个开源软件框架，用于存储大量数据，并发处理/查询在具有多个商用硬件(即低成本硬件)节点的集群上的那些数据。总之，Hadoop 包括以下内容： HDFS(Hadoop Distributed File Sys ...

数据分析师是做什么的？数据分析师岗位职责介绍

2022-10-09

当今社会对于数据分析的爆炸性需求，对从数据分析中收益的企业来说是美事一桩。数据分析师也变得炙手可热。那数据分析师是做什么的？数据分析师岗位职责又是什么呢？为了帮助您了解数据分析师的日常工作，学掌门为您 ...

数据分析师的职业发展

2022-10-09

最近常常看到关于数据分析师职业发展瓶颈的讨论，观点不一，众说纷纭。“要不要选数据分析岗？”、“数据分析未来的发展通道是什么？”这类问题也会经常被问到。今天我们就来聊一聊数据分析的职业发展道路的问题。 ...

常见的数据分析工具

2022-09-19

Step1：Excel学习掌握 所用的工具正是职场中最常用的Excel！ ①重点函数学习 重点是了解各种函数：Vlookup、sum，count，sumif，countif，find，if，left/right，时间日期函数、文本函数 ②数据透视 ...

数据分析师证书报考资格_CDA数据分析师报考条件

2024-08-13

PART 8 数据管理（5%） CDA LEVEL II CDA Level II 包含以下科目：《数据采集与数据处理》、《统计分析》、《商业策略分析》、《数据治理》 PART 1 数据采集与处理（占比9%） PART 2 指标体系（占比3%） PART 3 数 ...

在线大数据分析培训机构-CDA大数据分析集训营

2022-09-16

在线大数据分析培训机构-课程简介 CDA大数据分析集训营：随着电子信息、物联网、互联网等产业的高速发展，智能手机、平板电脑、可穿戴设备与物联网设备已经渗入到现代生产生活的方方面面，每时每刻都产生着 ...