大数据-数据科学专业问答社区-CDA答疑社区

热线电话：13121318867

登录

大魔王泛泛

简述环境变量path和classpath的作用

PATH:用于列出可执行文件的搜索路径.因为通过要通过命令行的命令启动JAVA,JAVAC等编译工具和解释工具,系统必须要知道他们所在的位置,PATH就是用来指明他们的位置的ClassPath：设置Classpath的目的，在于告诉Java执行环境，在哪些目录下可以找到您所要执行的Java程序所需要的类或者包

24.3455

2

2

0

关注作者

收藏

大魔王泛泛

bios虚拟机开启虚拟化

1.进入BIOS，开机时按F10或F122、进入BIOS后，找到Configuration选项，选择Intel Virtual Technology并回车，将光标移至Enabled，然后再回车，最后按F10保存并退出。如果找不到Configuration选项，可以试试下面的方法：某些HP电脑进入BIOS后，需要选择SystemConfiguration(系统配置)菜单，然后选择Devic

17.2528

3

1

0

关注作者

收藏

PGC123

在建模的时候只要是类别变量都要用哑编码吗？

在建模的时候只要是类别变量都要用哑编码吗？答：一般是这样但是也不是绝对的，不同算法框架要求也不相同。同样的算法不同的库里实现起来不同，对数据的要求也不尽相同。scikit-learn一版是会要求类别变量做哑变量处理的，但是具体问题具体分析，接触新的库的时候还是要先看官方帮助文档的，看看对数据有什么样的要求，再对数据做处理。

29.5834

2

3

0

关注作者

收藏

PGC123

机器学习训练后的模型如何保存？

机器学习训练后的模型如何保存？答：使用机器学习算法在训练数据上训练出的模型必须要导出来的，因为训练过程是比较耗时的，我们不可能每次使用模型做预测或者分类的时候再训练一次。模型保存如何实现呢？以scikit-learn 为例：首先训练一个模型# 训练svm模型from sklearn import svmfrom sklearn import datasetsclf=svm.SVC(

29.5834

2

3

0

关注作者

收藏

PGC123

pyecharts无法在jupyterlab中显示问题

pyecharts无法在jupyterlab中显示问题。我的代码运行后并不能绘制出图像来，我是使用jupyter lab运行代码的，用notebook就可以。答：不同的 Notebook 环境有自己不同的渲染要求，pyecharts 在底层做了适配处理，但因为我们无法在import pyecharts的时候知道用户具体使用的是哪种 Notebook 环境，所以需要用户在使用时在顶部声明环境类

30.5863

3

2

0

关注作者

收藏

PGC123

安装python包提示vc 14.0错误

安装python包提示vc 14.0错误答：很多python的第三方库是使用C 开发的，因此安装编译环节对编译环境有一定的要求。在windows下一般使用微软的C 编译工具，这个错误就是缺少编译工具导致的，可以去微软官网下载安装编译工具即可解决问题。这里我也给大家准备了一个百度云盘的链接，有需要的可以下载一下。链接：https://pan.baidu.com/s/1SKpY

23.6332

2

1

0

关注作者

收藏

PGC123

在做词云图的时候缺少字体文件

在做词云图的时候缺少字体文件C:/Windows/Fonts/STLITI.ttf 是不是没有这种 pyechart ERROR: Could not find a version that satisfies the requirement pyechart (from versions: none)ERROR: No matching distribution found for p

24.9443

3

3

0

关注作者

收藏

PGC123

如何快捷稳定的安装python的第三方包？

如何快捷稳定的安装python的第三方包？答：anaconda 已经给我们提供了大量的数据分析相关python工具包，但是这还远远不够，因此需要我们额外安装。当我们使用pip 安装时由于默认服务器在国外，因此很容易造成各种timeout httpError问题，如果使用国内的镜像服务器那该多好。如何使用呢？命令行，或者jupyter notebook pip in

23.6332

2

1

0

关注作者

收藏

PGC123

安装完anaconda闪退-sqlite3问题

我在公司电脑上装的Anaconda3（32位）怎么一点启动一闪就没了这是什么原因呢？答：从报错信息来看软件缺少了相关DLL，因此首先想到的是重装anaconda（对于初学者，这是个解决问题的好办法），但是没能奏效。然后认真看了下报错，是在import sqlite3的时候报的错，因此查阅文档，最后发现这是因为anaconda的DLLs文件夹下没有sqlite3.dll的原因

24.0120

3

4

0

关注作者

收藏

大魔王泛泛

解释一下图中Spark里的hive-site配置信息

hive.metastore.uris thrift://localhost:9083 spark中hive-site里这个配置信息是为了spark能访问到hive的元数据库而配置的

1.6049

1

2

0

关注作者

收藏

大魔王泛泛

如何解决图中的hive报错？

图中报错是因为没有开启元数据库执行命令：hive--service metastore

1.6049

1

2

0

关注作者

收藏

大魔王泛泛

如何解决图中java报错？

图中报错信息的解决方案：因为没有开启zookeeper服务执行命令：zkServer.sh start

1.6049

1

3

0

关注作者

收藏

大魔王泛泛

Hive的数据是存储在哪里的？

hive操作的是HDFS上的数据 hive本身并不存储数据

1.6049

1

3

0

关注作者

收藏

大魔王泛泛

Sqoop 从mysql导入HDFS数据命令

sqoop import --connect jdbc:mysql://master:3306/batch --username hive -password hive --table RawDataForComparing -m 6 --split-by id -target-dir '/usr/hive/RawDataForComparing' --delete-target-dir

0.0000

0

1

0

关注作者

收藏

大魔王泛泛

Hive是数据库吗？

Hive是基于Hadoop的一个数据仓库工具，可以将结构化的数据文件映射为一张数据库表，并提供完整的sql查询功能，可以将sql语句转换为MapReduce任务进行运行。其优点是学习成本低，可以通过类SQL语句快速实现简单的MapReduce统计，不必开发专门的MapReduce应用，十分适合数据仓库的统计分析

30.0000

1

0

0

关注作者

收藏

大魔王泛泛

mysql里的hive数据库是哪一部建立的？

是在启动hive时自动创建的

0.0000

0

3

0

关注作者

收藏

大魔王泛泛

简述一下什么是Hive？

hive是基于Hadoop的一个数据仓库工具，用来进行数据提取、转化、加载，这是一种可以存储、查询和分析存储在Hadoop中的大规模数据的机制。hive数据仓库工具能将结构化的数据文件映射为一张数据库表，并提供SQL查询功能，能将SQL语句转变成MapReduce任务来执行

0.0000

0

3

0

关注作者

收藏

大魔王泛泛

伪分布和分布式有什么区别？

伪分布：不是真正的分布式是将多台机器的任务放到一台机器运行分布式：是将一个作业进行拆分，分别在不同的机器上运行，能快速的处理作业。

30.0000

1

2

0

关注作者

收藏

PGC123

python如何实现中值滤波？

python如何实现中值滤波？答：scipy中已经实现了该方法，主要用于图像的预处理过程。用法如下：import scipy.signal as signalsignal.medfilt(数据,kernel_size)一般图像的时候 kernel_size是二维元组。如果是一维的数据可以给kernel_size传入一元组signal.medfilt([1,2,3,4,5,6,7,

12.0875

2

2

0

关注作者

收藏

PGC123

unexpected EOF while parsing？

代码出现如下报错 unexpected EOF while parsing？File "", line 1 signal.medfilt(data_01_.iloc[:,1],kernel_size=(5,) ^S

19.6153

2

5

0

关注作者

收藏

<1…212223…75>

CDA考试动态

CDA报考指南