分区表可以跟 partition (key1 = v1, key2 = v2, …)
Hive 是基于Hadoop 构建的一套数据仓库分析系统，它提供了丰富的SQL查询方式来分析存储在Hadoop 分布式文件系统中的数据，可以将结构
Python最大的优点之一就是语法简洁，好的代码就像伪代码一样，干净、整洁、一目了然。要写出 Pythonic（优雅的、地道的、整洁的）代码，需要多看多学大牛们写的代码，github 上有很多非常优秀的源代码值得阅读，比如：requests、flask、tornado，下面列举一些常见的Pythonic写法。 程序必须先让人读懂，然后才能让计算机执行 “Programs must be written for people to read, and only incidentally for mac
Python最大的优点之一就是语法简洁，好的代码就像伪代码一样，干净、整洁、一目了然。要写出 Pythonic（优雅的、地道的、整洁的）代码，需要多看多学大牛们写的代码，github 上有很多非常优秀的源代码值得阅读，比如：requests、flask、tornado，下面列举一些常见的Pythonic写法。
http://lovesoo.org/pythonic-python-programming.html
整除 3//2 数字转字符串 str(number)，字符串转数字 int(str) 字符串所有方法不修改字符串本身 .title() .upper() .lower() .strip()/.lstrip()/.rstrip() .split() 列表方法修改列表本身 .append() .insert(ind,val) del list[index]/.pop(可选index) /.remove(element) .sort(可选 key = lambda x: x[1], 可选reverse=True
对于刚开始学习Python的读者，一定在编写代码的时候，遇到过这个问题。他们到底是怎么回事呢？且听我一一道来。
Python最大的优点之一就是语法简洁，好的代码就像伪代码一样，干净、整洁、一目了然。
首先解释一下语法糖是什么意思，其实就是简化我们的代码，让那些复杂的操作交给解释器来完成，这些语法糖刚开始学的时候觉得很难记住，如果看别人写的语法糖更容易蒙圈，还会嘀咕别人装什么装，但是一旦自己掌握，啧啧啧，一发不可收拾，可谓真香。
for 语句是 Python 中执行迭代的两个语句之一，另一个语句是 while。如果你对 Python 的迭代并不是很熟悉的话，Python中的迭代：for、while、break、以及continue语句是一个不错的切入点。
该文介绍了关于数据库连接池的知识点，包括概念、特点、配置方式、调优参数和常见问题。同时，文章还提供了如何正确配置和优化数据库连接池的相关建议，以帮助开发人员更好地掌握和应用该技术。
本文由马哥教育Python实战开发班6期学员推荐，转载自互联网，作者为赖笔小新，感谢作者的辛苦付出和贡献。 最近发现进入python群的朋友都在你是如何自学python语法的，每当被问到这个问题时，我内心是坦荡的，因为我不知道到底我接下来说的这些话会给看到的各位带来什么？ 虽然大家已经对Python已经有了一个初步认识 了，但是我还不得不说关于Python语法的一些事，以便于我这个装逼的过程顺利的完成。 ————!!! 只针对有经验开发人员 ---- 简单输入输出 ---- 输出 print 10
V站 Python最大的优点之一就是语法简洁，好的代码就像伪代码一样，干净、整洁、一目了然。要写出 Pythonic（优雅的、地道的、整洁的）代码，需要多看多学大牛们写的代码，github 上有很多非常优秀的源代码值得阅读，比如：requests、flask、tornado，下面列举一些常见的Pythonic写法。 程序必须先让人读懂，然后才能让计算机执行 “Programs must be written for people to read, and only incidentally for mach
参数类型： 我们经常在看别人的代码中，经常出现def(*args,**kwargs)这样的表现形式;
使用 enumerate() 迭代列表时，可以同时生成索引和元素，先来看自己实现这样的方式：
概述 hi，朋友们大家好，今天将英文原著作者 @yasoob《Intermediate Python》进行翻译和在工作中使用的Python技巧进行了总结。Gitbook里面有翻译的版本，大家可以下载下来看看。我今天主要是将该英文原著翻译成适合自己的理解的语言，并附加一些自己在工作中使用Python的技巧。废话少说，下面我们依次来学习一下@yasoob的原著。 Intermediate Python 中译 如果在翻译过程中有问题或者code无法运行，还请各位大侠指正。 *args和**kwargs 我们在函数
记录python的一些基础语法，用于查阅 列表和元组 列表和元组都是有序的，可以存储任意数据类型的集合 列表是动态的，长度可变，存储空间和性能略逊与元组 元组是静态的，长度大小固定，不能增加修改 创建一个列表使用 empty_list = [] 相比于 list() 更好，因为 [] 底层走的c，而 list() 是函数，更加贵 l = [1, 2, 3, 4] tup = (1, 2, 3, 4) list((1, 2, 3)) [1, 2, 3] l.count(3) l.index(7) l.re
本章目录： 一、三元表达式、列表推导式、生成器表达式 二、递归调用和二分法 三、匿名函数 四、内置函数 ================================
生活中充满了例行公事。在程序中一样，也要做很多重复的工作。编程语言使用循环处理这些重复任务。Python编程语言提供以下两种循环：
好久没讲技术了，先回忆一下啥是函数式编程（FP）吧，比如FP要求使用表达式，不允许出现语句，这样更接近自然语言。
参考链接： 带有示例的Python中的map()，filter()和reduce()
--define可以定义用户变量 --hivevar可以定义用户遍历 --hiveconf使用key-value得到hive-site.xml配值的变量
默认的python的文件为：文件名.py #!/usr/bin/env python # coding=utf-8 对中文的支持（切记：等号两边没有空格） 执行python 文件： [root@localhost Desktop]# python test1.py [root@localhost Desktop]# chmod +x test1.py [root@localhost Desktop]# ./ test1.py 变量： 指向内存的一个符号 不同文件系统也是属于不同的类型 它作用于磁盘 python：强类型的动态语言 “变量可以替换，包括变量的类型” 数据类型分为两大类： 数字类型和字符串类型 >>> a = 1 >>> type(a) <type 'int'> >>> a= 'str' >>> type(a) <type 'str'> 不同的数据类型时不能做变换的 >>> a='hello' >>> b= 'world' >>> a+b 'helloworld' 同其他语言一样 在python中： 从高精度向低精度转换时会存在数据损失，在低精度向高精度转换时不会存在 程序=数据结构+算法 优先级： 单目>双目 （单目：！ 双目运算符：+ - * / ；在python里面没有三目运算符） 算术运算符 > 位操作运算符>比较运算符>逻辑运算符 算术运算符： + - * / % 位操作运算符： << >> & ^ | ~ 比较运算符： < <= > >= != 逻辑运算符：and or not 赋值= () 优先级最大 赋值= 优先级最小 表达式： 除法运算： >>> 10/3 3 >>> 10/3.0 3.3333333333333335 >>> 10.0/3 3.3333333333333335 幂运算： >>> 2**4 16 除法取整运算： >>> 10//3.0 3.0 >>> 10.0//3 3.0 >>> 10//3 3 取模运算： >>> 10%3 1 >>> 10%3.0 1.0 按位与 & 全为真则为真 或 | 有一个为真则为真 异或 ^ 有两个不同时则为真，相同时则为假 >>> 2<<3 00010 左移3位 10 000=2**4 16 >>> 2>>3 00010 右移三位出界则为零 0 >>> 3&2 按位与：11&10 => 10 2 >>> 3^2 异或： 11^10 => 01 1 >>> 3|2 按位或：11|10 => 11 3 程序结构： if 语句 只能进入一个分支执行且执行完跳出 在if语句中只有一个 else 可有多个 elif 分支语句只有一个if 循环语句：while for break continue 且循环里面可以有else while condition: expression for item in 迭代器(列表，元组等) expression break 退出整个循环体 continue 退出当前循环 python的内置容器有： 列表，元组，字典，集和， >>> a= [1,4,5,'lo'] ##定义一个列表 列表中的元素没有要求 且列表可以嵌套 >>> type(a) ##type() 查看类型 <type 'list'> range() 得到一个列表 >>> range(0,2) [0, 1] >>> dir(a) ##可以查看对于一个容器能够执行的操作 ['__add__', '__class__', '__contains__', '__delattr__', '__delitem__', '__delslice__', '__doc__', '__eq__', '__format__', '__ge__', '__getattribute__', '__getitem__', '__getslice__', '__gt__', '__hash__', '__iadd__', '__imul__', '__init__', '__iter__', '__le__', '__len__', '__lt__', '__mul__', '__ne__', '__new__', '__reduce__', '__reduce_ex__', '__repr__', '__reversed__', '__rmul__', '__setattr__', '__setitem__', '__setslice__', '__sizeof__', '__str__', '__subclasshook__', 'append', 'c
今天给大家介绍一个Python备忘单，可以作为学习Python编程的快速参考指南。
本文主要是对Python的数据结构进行了一个总结，常见的数据结构包含：列表list、元组tuple、字典dict和集合set。
不懂hive中的explain，说明hive还没入门，学会explain，能够给我们工作中使用hive带来极大的便利！
链接 | my.oschina.net/u/4006148/blog/3078359
Hive是基于Hadoop的一个数据仓库工具，可以将结构化的数据文件映射为一张数据库表，并提供类SQL查询功能。
-多年互联网运维工作经验，曾负责过大规模集群架构自动化运维管理工作。 -擅长Web集群架构与自动化运维，曾负责国内某大型金融公司运维工作。 -devops项目经理兼DBA。 -开发过一套自动化运维平台（功能如下）： 1)整合了各个公有云API，自主创建云主机。 2)ELK自动化收集日志功能。 3)Saltstack自动化运维统一配置管理工具。 4)Git、Jenkins自动化代码上线及自动化测试平台。 5)堡垒机，连接Linux、Windows平台及日志审计。 6)SQL执行及审批流程。 7)慢查询日志分析web界面。
经常听到【谓词下推】这个词，却从来没有对它进行全面的深入的研究，直到前些天，我们的数据产品跑过来跟我讨论 他写的一个sql，这个sql最终出现的结果并不是他想要的。看了具体的sql后，引发了我的一些思考，决定来挖一挖谓词下推。
>>> print(2,3,4) //python2.x (2, 3, 4) >>>
hive提供了一个动态分区功能，其可以基于查询参数的位置去推断分区的名称，从而建立分区。
以前我是写 C++/C# 的，刚开始写 Python 的时候还带着 C# 留下的“口音”，这样一来，代码看起来不仅不正宗，而且不简洁。
CREATE TABLE IF NOT EXISTS salgrade2 ( GRADE int, LOSAL int, HISAL int ) partitioned by (day string) row format delimited fields terminated by '\t' location '/data/inner/ODS/01/salgrade2';
匿名函数 lambda 和常规函数一样，返回的都是一个函数对象（function object)
前段时间用Python刷了一些题，把刷题的过程遇到的一些小知识点总结了一下，都是一些比较基础的知识点，特别适合一些刚入门的新手看~
在python中，函数是一等对象。编程语言理论家把“一等对象”定义为满足以下条件的程序实体：
本文来源：开源中国，译者rever4433, Tocy, Tony, 南宫冰郁 本文链接：https://www.oschina.net/translate/learning-python-from-
以#开头的语句是注释，解释器会忽略掉注释。其他每一行都是一个语句，当语句以冒号:结尾时，缩进的语句视为代码块。
初入坑Python，打算跟着沫凡小哥的学习视频打个基础，此篇文章做一些简单的学习记录，加油加油加油啦 沫凡小哥的学习网站：https://morvanzhou.github.io/tutorials/
Hive SQL的执行计划描述SQL实际执行的整体轮廓，通过执行计划能了解SQL程序在转换成相应计算引擎的执行逻辑，掌握了执行逻辑也就能更好地把握程序出现的瓶颈点，从而能够实现更有针对性的优化。此外还能帮助开发者识别看似等价的SQL其实是不等价的，看似不等价的SQL其实是等价的SQL。可以说执行计划是打开SQL优化大门的一把钥匙。
编译 SQL 的任务是在上节中介绍的 COMPILER（编译器组件）中完成的。Hive将SQL转化为MapReduce任务，整个编译过程分为六个阶段：
列表（list）：内置类型，可变（或不可哈希），其中可以包含任意类型的数据，支持使用下标和切片访问其中的某个或某些元素，常用方法有append()、insert()、remove()、pop()、sort()、reverse()、count()、index()，支持运算符+、+=、*、*=。可以使用[]直接定义列表，也可以使用list()把其他类型的可迭代对象转换为列表，列表推导式也可以用来创建列表，若干标准库函数、内置类型方法以及扩展库函数或方法也会返回列表。列表不能作为字典的“键”，也不能作为集合的元素
我们平时经常可以在Python的代码中看到一种lambda开头的这种表达式，如果没有学过Python的相关知识，可能会一脸懵逼，不清楚到底这个关键字是干嘛的，用来表示什么。
lambda体中调用方法的参数列表和返回值类型，要和函数式接口中抽象方法的参数列表和返回值类型保持一致。
数据库非常重要，程序的数据增删改查需要数据库支持。python处理数据库非常简单。而且不同类型的数据库处理逻辑方式大同小异。本文以sqlite数据库为例，介绍一下python操作数据库的方法。
-------------------系统内建函数------------------- 1、字符串 str='这是一个字符串数据测试数据'对应 str[0]：获取str字符串中下标为0的字符。 str[3]：获取str字符串中下标为3的字符。 str[0:3]：获取到字符串中从下标为0到下标为3的字符串。
关系运算符 if 语句 实际应用中的程序，大多不是一撮而就的，而是根据条件不同存在很多分支。 最基本的条件分支结构是if...else...语句即如果。。。否则。。。 在python当中，if condition1:（注意最后的冒号:）称为“语句头”。冒号:之后另起一行缩进的是“语句体”，语句体的行数不限，但至少有一行，否则需要用pass填充（即什么也不做）。 缩进是Python复合语句的关键，初学者经常因缩进不当而导致报错。关于缩进的习惯可以分为两个派别：Tab党，和Space党，即用Tab键或空格键来控
领取专属 10元无门槛券
手把手带您无忧上云
