数据处理流程和数据分析方法

2017-11-21

数据处理流程和数据分析方法 大数据分析这件事用一种非技术的角度来看的话，就可以分成金字塔，自底向上的是三个部分，第一个部分是数据采集，第二个部分是数据建模，第三个部分是数据分析，我们来分别看一下。 ...

运用大数据处理技术 做好国有企业思想政治工作

2017-11-14

运用大数据处理技术 做好国有企业思想政治工作 在全面深化企业改革和互联网全面普及的新形势下，国有企业思想政治工作面临着许多新情况，国有企业要勇于挑战自我、求新达变，积极推进思想政治工作理念创新、手 ...

SPSS-数据处理-数据变量

2017-10-23

SPSS-数据处理-数据变量 spss工具中”行“用【个案】表示，“列”用【变量】表示。变量其实也就是我们在数据库中称之为字段的概念。但是在统计学中，我们称之为变量。 接下来主要介绍两点有关变量的基础知识 ...

R语言︱噪声数据处理、数据分组—分箱法（离散化、等级化）

2017-07-17

R语言︱噪声数据处理、数据分组—分箱法（离散化、等级化） 分箱法在实际案例操作过程中较为常见，能够将一些数据离散化，等级化，比如年龄段，我们并不想知道确切的几岁，于是乎可以将其分组、分段。 基础 ...

R语言时间数据处理之lubridate包

2017-05-08

R语言时间数据处理之lubridate包 在我们处理一些时间序列数据时，经常会碰到各种时间数据，比如“2016-03-03”。很多时候我们需要提取出其中的年、月、日甚至是小时、分、秒，从而可以方便的进行比较、筛选等操 ...

一个使用R语言做数据处理的实例

2017-04-21

一个使用R语言做数据处理的实例 最近一个同学找到我，希望我帮忙处理一份数据。那份数据是这样的：包含了3661行，第一行为各列的名称；包含8列，第一列为专利ID，其余7列为企业ID。 这份数据截图如下所示： ...

数据处理中，偏态数据如何正态化？

2020-07-17

在数据处理过程中，经常会遇到偏态数据。我们都知道数据整体服从正态分布，那样本均值和方差则相互独立。因此大家都会希望数据事成正态分布的，但是现实情况却是：大多数情况下，数据都是偏态分布的，这时候就需要 ...

【CDA干货】SQL日期提取：从文本到可用数据，解锁时间维度的业务价值

2026-04-20

在数据处理与分析的全流程中，日期数据是贯穿业务场景的核心维度之一——无论是业务报表统计、用户行为追踪，还是风控规则落地、数据建模特征构建，都离不开对日期信息的精准提取与高效利用。而SQL作为数据查询与处 ...

【CDA干货】特征重要性分析：解锁机器学习模型价值的核心钥匙

2026-04-20

在机器学习建模全流程中，特征工程是连接原始数据与模型效果的关键环节，而特征重要性分析则是特征工程的“灵魂”——它不仅能帮我们筛选冗余特征、优化模型结构，更能破解模型“黑箱”困境，揭示数据与目标变量之间 ...

【CDA干货】数据分析与数据挖掘：必备工具与核心技能全解析

2026-04-17

在数字化时代，数据已成为企业决策的核心驱动力，数据分析与数据挖掘作为解锁数据价值的关键手段，广泛应用于互联网、金融、医疗、零售等各个领域。数据分析聚焦“解读数据、发现规律”，回答“是什么、为什么”；数 ...

【CDA干货】SQL 查询结果转换为字符串：场景、方法与实战技巧全解

2026-04-17

在数据处理、后端开发、报表生成与自动化脚本中，将 SQL 查询结果转换为字符串是一项高频且实用的操作。无论是拼接多行数据为逗号分隔文本、生成可直接执行的 SQL 语句、格式化输出报表内容，还是在程序中传递数据集 ...

【CDA干货】随机森林特征重要性分析：原理、方法与实操指南

2026-04-16

在机器学习建模实践中，特征工程是决定模型性能的核心环节之一。面对高维数据集，冗余特征、无关特征不仅会增加模型训练成本、延长训练时间，还可能引发过拟合，降低模型泛化能力，甚至掩盖关键特征的真实影响。随机 ...

从表格到洞察：数据分析师视角下的表格结构数据特征与实战应用

2026-04-16

数据分析师一天的工作，80% 的时间围绕表格结构数据展开。从一张销售明细表到一份完整的分析报告，表格结构数据贯穿始终。但你真的了解它的特征吗？ 引言：为什么 “看懂表格” 是数据分析的第一步？ 小王刚信心满满 ...

表格结构数据进阶：从类型识别到功能实战

2026-04-15

数据分析师的一天，80%的时间花在表格数据上，但80%的坑也踩在表格数据上。 如果你分不清数值型和文本型的区别，不知道数据从哪里来、怎么查、怎么算，分析结果从一开始就是错的。 引言：为什么你掌握了基础，还是做 ...

流程为脉，专业为核：CDA数据分析师赋能商业数据分析全流程

2026-04-13

在数据驱动商业升级的今天，商业数据分析已成为企业精细化运营、科学决策的核心手段，而一套规范、高效的商业数据分析总体流程，更是实现数据价值转化的关键前提。商业数据分析总体流程并非零散的步骤拼接，而是一套 ...

【CDA干货】集成学习赋能模型不确定性分析：原理、方法与实践

2026-04-10

在机器学习模型的落地应用中，预测精度并非衡量模型可靠性的唯一标准，不确定性分析同样不可或缺。尤其是在医疗诊断、自动驾驶、金融风控等安全关键领域，模型的过度自信或不确定性误判，可能引发致命后果——自动驾 ...

可视化传声，专业赋能：CDA数据分析师玩转统计制图核心价值

2026-04-10

数据本身是沉默的，唯有通过有效的呈现方式，才能让其背后的规律、趋势与价值被看见、被理解、被运用。统计制图（数据可视化）作为数据分析的核心呈现手段，将抽象的原始数据转化为直观的图表、看板，搭建起数据与决 ...

【CDA干货】文本挖掘技术赋能跨文化传播研究：理论融合与实践路径

2026-04-09

在全球化深度发展的今天，跨文化传播已成为连接不同文明、促进多元共生的核心纽带，其研究核心围绕“信息传递、文化解读、意义建构”三大维度展开。传统跨文化传播研究多依赖定性分析，难以应对海量跨文化文本数据（ ...

范式为纲，专业为器：CDA数据分析师玩转数据分析基础范式

2026-04-09

在数据驱动的时代，数据分析早已不是“凭经验、靠感觉”的零散操作，而是一套具备固定逻辑、标准化流程的系统方法——这就是数据分析基础范式。它为数据分析工作提供了清晰的框架与路径，让杂乱无章的原始数据，能够 ...

【CDA干货】LSTM预测结果波动：成因解析、影响评估与优化策略

2026-04-08

长短期记忆网络（LSTM）作为循环神经网络（RNN）的重要改进模型，凭借其独特的门控机制（遗忘门、输入门、输出门），有效解决了传统RNN在处理长序列数据时的梯度消失或梯度爆炸问题，已广泛应用于时间序列预测、自然 ...