首页
学习
活动
专区
工具
TVP
发布

Golang开发

专栏成员
289
文章
274020
阅读量
38
订阅数
RDD和DataFrame转换
在利用反射机制推断RDD模式时,需要首先定义一个case class,因为,只有case class才能被Spark隐式地转换为DataFrame。
羊羽shine
2019-08-23
1.2K0
Spark SQL
官方地址 http://spark.apache.org/sql/ Spark SQL是Spark用来处理结构化数据的一个模块,它提供了2个编程抽象:DataFrame和DataSet,并且作为分布式SQL查询引擎的作用。
羊羽shine
2019-08-22
7320
Hadoop——Hive
官方地址http://hive.apache.org/ 简单,容易上手提供了类似SQL查询语言HQL 为超大数据集设计的计算、存储拓展能力 统一的元数据管理
羊羽shine
2019-08-19
4080
MongoDB(2)——基本操作
修改数据 object id每个文档都有一个属性,为_id,保证每个文档的唯一性,可以自己去设置_id插入文档 如果没有提供,那么MongoDB为每个文档提供了一个独特的_id,类型为objectID,objectID是一个12字节的十六进制数,前4个字节为当前时间戳,接下来3个字节的机器ID,接下来的2个字节中MongoDB的服务进程id,最后3个字节是简单的增量值。
羊羽shine
2019-05-30
3590
Elasticsearch(二)——Rest API
RESTful 接口 URL 的格式是: http://cluster的地址: 9200/<index>I<type>I [<id>] 其中,index, type 是必须提供的( index 可以理解为数据库;type 理解为数据表); id 是可选的(相当于数据库表中记 录的主键是唯一的。如果不提供, Elasticsearch 会向动生成。增 、删、改,查分别对应 HTTP 请求的 PUT 、DELETE、POST、GET方法。
羊羽shine
2019-05-29
1.1K0
iOS持续集成(CI)——OCLint静态代码分析
通过 -e 选项来忽略Cocoapods 来pod文件,通过--来分割 oclint-json-compilation-database 的参数与 oclint_args。oclint_args 就是 oclint 命令的参数。 -report-type 文件类型
羊羽shine
2019-05-29
1.9K0
Redis(2)——通用命令
set key value xx key存在才设置,不存在不设置,也就是update 更新操作
羊羽shine
2019-05-29
4210
Java——JDBC
• 加载数据库驱动 • 建立连接 • 创建用于向数据库发送SQL的Statement对象 • 从代表结果集的ResultSet中取出数据 • 断开与数据库的连接,并释放相关资源 pom配置文件
羊羽shine
2019-05-29
5170
JDBC连接池
当系统初始化好后,容器被创建,容器中会申请一些连接对象,当用户来访问数据库时,从容器中获取连接对象,用户访问完之后,会将连接对象归还给容器。
羊羽shine
2019-05-29
9970
MySQL——监控
数据库的进程是端口存在,并不意味着数据库是可用的。 通过网络连接到数据库并且确定数据库是可以对外提供服务的。 如何确认数据库是否可以通过网络连接 MySQL本地的SQL 并不意味着可以连接到数据库服务器,防火墙,TCP/IP mysqldamin -umonitor_user -p -h ping telnet ip db_port 使用程序通过网络建立数据库连接 如何确认数据是否可以读写 检查数据库的read_only 参数是否为off 主从切换 新的主库原先是从库 造成主库不可写,定期对主从服务器中主数据库的read_only参数进行检查。 建立监控表并对表中数据进行更新。 判断数据库是否可读 select@@version
羊羽shine
2019-05-28
1.9K0
MySQL——SQL查询优化
慢查询日志 slow_query_log 启动停止记录慢查询日志,默认不启动 slow_query_log_file 指定慢查询日志的存储路径以及文件,默认情况下保存在MySQL的数据目录中 long_query_time 指定记录慢查询日志SQL执行时间的阈值,默认值为10秒,通常改为0.001秒也就是1毫秒可能比较合适 log_queries_not_using_indexes 是否记录未使用索引的SQL 设置开启慢查询
羊羽shine
2019-05-28
1.6K0
MySQL——事务
事务是数据库系统区别于其他一切文件系统的重要特性之一 事务是一组具有原子性的SQL语句,或是一个独立的工作单元
羊羽shine
2019-05-28
1.7K0
Django——模型Model
对象关系映射(Object Relation Mapping)实现了关系和数据库之间的映射,隐藏了关系数据访问的细节,不需要再编写SQL语句
羊羽shine
2019-05-28
7120
Linux 文件搜索
* 匹配任意内容 ?匹配任意一个字符 [] 匹配任意一个中括号内的字符 不区分大小写查找文件
羊羽shine
2019-05-28
4.8K0
Python——MongoDB操作
pymogo shell连接mongodb的命令mongo $ mongo MongoDB shell version v3.6.2 connecting to: mongodb://127.0.0.1:27017 MongoDB server version: 3.6.2 Server has startup warnings: 2018-08-05T14:29:13.960+0800 I CONTROL [initandlisten] 2018-08-05T14:29:13.960+0800 I CO
羊羽shine
2019-05-28
5430
Python——MySql操作
pymysql 的GitHub地址:https://github.com/PyMySQL/PyMySQL
羊羽shine
2019-05-28
7620
没有更多了
社区活动
【纪录片】中国数据库前世今生
穿越半个世纪,探寻中国数据库50年的发展历程
Python精品学习库
代码在线跑,知识轻松学
博客搬家 | 分享价值百万资源包
自行/邀约他人一键搬运博客,速成社区影响力并领取好礼
技术创作特训营·精选知识专栏
往期视频·千货材料·成员作品 最新动态
领券
问题归档专栏文章快讯文章归档关键词归档开发者手册归档开发者手册 Section 归档