腾讯云开发者社区-腾讯云

开发者社区

文档建议反馈控制台

最新优惠活动

文章/答案/技术大牛

发布

恩蓝脚本

脚本大全

专栏作者

12631

文章

25191878

阅读量

85

订阅数

python实现PCA降维的示例详解

编程算法大数据 python 数据分析

本文主要介绍一种降维方法，PCA（Principal Component Analysis，主成分分析）。降维致力于解决三类问题。

2020-11-05

2.4K0

python爬虫容易学吗

html php 大数据 python http

随着大数据时代的到来，数据将如同煤电气油一样，成为我们最重要的能源之一，然而这种能源是可以源源不断产生、可再生的。而Python爬虫作为获取数据的关键一环，在大数据时代有着极为重要的作用。于是许多同学

2020-11-02

5100

Python连接HDFS实现文件上传下载及Pandas转换文本文件到CSV操作

python node.js 大数据

通过hadoop hive或spark等数据计算框架完成数据清洗后的数据在HDFS上

2020-10-29

6.1K0

python访问hdfs的操作

node.js 大数据 python hadoop

以上这篇python访问hdfs的操作就是小编分享给大家的全部内容了，希望能给大家一个参考。

2020-10-29

1.6K0

python读取hdfs上的parquet文件方式

大数据 python node.js http

在使用python做大数据和机器学习处理过程中，首先需要读取hdfs数据，对于常用格式数据一般比较容易读取，parquet略微特殊。从hdfs上使用python获取parquet格式数据的方法(当然也可以先把文件拉到本地再读取也可以)：

2020-10-29

3.2K0

python读取hdfs并返回dataframe教程

hadoop node.js python 大数据

补充知识：Python连接HDFS实现文件上传下载及Pandas转换文本文件到CSV

2020-10-29

3.5K0

pandas分批读取大数据集教程

大数据数据处理文件存储

如果你的电脑内存较小那么想在本地做一些事情是很有局限性的（哭丧脸），比如想拿一个kaggle上面的竞赛来练练手，你会发现多数训练数据集都是大几G或者几十G的，自己那小破电脑根本跑不起来。行，你有8000w条样本你牛逼，我就取400w条出来跑跑总行了吧（狡滑脸）。

2020-10-29

3.2K0

python使用hdfs3模块对hdfs进行操作详解

node.js 大数据 hadoop python api

身为一个python程序员，每天操作hdfs都是在程序中写各种cmd调用的命令，一方面不好看，另一方面身为一个Pythoner这是一个耻辱，于是乎就挑了一个hdfs3的模块进行hdfs的操作，瞬间就感觉优雅多了：

2020-10-29

1.7K2

python3.6.5基于kerberos认证的hive和hdfs连接调用方式

大数据 node.js hive kerberos python

1. Kerberos是一种计算机网络授权协议，用来在非安全网络中，对个人通信以安全的手段进行身份认证。具体请查阅官网

2020-10-29

3.4K0

centos7搭建hadoop2.10高可用(HA)

node.js 大数据 zookeeper hadoop ssh

本篇介绍在centos7中搭建hadoop2.10高可用集群，首先准备6台机器：2台nn(namenode);4台dn(datanode)；3台jns(journalnodes)

2020-10-22

5960

通过自学python能找到工作吗

python 网站 java 大数据

Python语言在近几年的上升趋势非常明显，语言生态也越来越健全，在Web开发、大数据开发、人工智能开发（机器学习、计算机视觉等）、嵌入式开发和各种后端开发等领域都有普遍的应用，随着大数据和人工智能的不断发展，未来Python的发展空间将非常值得期待。

2020-10-21

1.2K0

python能否java成为主流语言吗

java python 大数据 go

首先，未来Python完全取代Java的可能性并不大，但是Python的发展确实能够挤占一部分Java的应用空间。

2020-10-21

4540

大数据分析用java还是Python

java 大数据 python 数据处理

学习大数据开发，java语言是基础，主流的大数据软件基本都是java实现的，所以java是必学的，

2020-10-21

1.6K0

学python最电脑配置有要求么

大数据 python 存储机器学习

python对于电脑硬件基本没什么要求，下载python安装程序的时候，注意看下自己电脑属性是64位系统还是32位系统，再下载对应的python安装程序。

2020-10-21

2K0

浅谈keras使用中val_acc和acc值不同步的思考

大数据腾讯云测试服务

这表明训练集和测试集同分布，在训练集中学习的特征确实可以应用到测试集中，这是最好的情况。

2020-10-21

1.8K0

php使用fputcsv实现大数据的导出操作详解

php 大数据数据库 sql 文件存储

本文实例讲述了php使用fputcsv实现大数据的导出操作。分享给大家供大家参考，具体如下：

2020-10-20

6470

Apache Hadoop版本详解

hadoop apache 专用宿主机大数据 https

由于Hadoop版本混乱多变，因此，Hadoop的版本选择问题一直令很多初级用户苦恼。本文总结了ApacheHadoop和Cloudera Hadoop的版本衍化过程，并给出了选择Hadoop版本的一些建议。

2020-10-19

2.9K0

没有更多了

社区活动

腾讯技术创作狂欢月

“码”上创作 21 天，分 10000 元奖品池！

Python精品学习库

代码在线跑，知识轻松学

博客搬家 | 分享价值百万资源包

自行/邀约他人一键搬运博客，速成社区影响力并领取好礼

技术创作特训营·精选知识专栏

往期视频·千货材料·成员作品最新动态