如何在千里之外能访问自己的电脑? 介绍 此次我们使用的是frp,frp是一个开源的项目。...我们需要配置服务器端和客户端,需要有一台服务器例如:阿里云的。 这里我使用的是一台阿里云的服务器。...= admin #web管理的用户的密码 vhost_http_port = 8010 #映射的私人电脑的http协议的端口 vhost_https_port = 443 privilege_token...#服务器提供的token [web] #要开的子项 type = http #子项的类型 tcp udp http https等大多数都支持 local_ip = 127.0.0.1 #本地的地址...local_port = 80 #本地的服务的端口号 custom_domains = web.sdgzs.net #要映射的域名 4、为了好测试搭建一个本地的web服务器 ?
本篇主要介绍如何对数据仓库中的关系表建立索引,注意是在关系数据库中的关系表,而不是SSAS中的数据表。...用户和产品的维度表中聚集索引建立在业务键上,通过这样的索引,能强化查询速度尤其是where语句中使用了这些键的。通常where 表达式中经常会使用这个键值来查询维度数据。...关系数据库引擎能直接从索引获取数据而不需要直接访问维度数据,减少了IO提高了查询速度。 如果在维度表中有其他用于查询、排序、分组的列,也可以创建非聚集索引,就如同你在事务性数据库中一样。...如果关系数据仓库只用来表现SSAS结构,那么可能不需要我们之前讨论的索引。SSAS更倾向于反复使用相同的查询,因此可以使用索引优化向导或者对查询进行精确调优。...开始单纯严谨彻底地评估以便在数据仓库中建立索引。 总结 本篇只是简单介绍了一般数据仓库的关系数据表如何建立索引,但是很多时候要根据实际请款来建立索引,甚至有时候不能使用索引。
但前缀索引也有它的缺点,不能在 order by 或者 group by 中触发前缀索引,也不能把它们用于覆盖索引。 什么情况下适合使用前缀索引?...当字符串本身可能比较长,而且前几个字符就开始不相同,适合使用前缀索引;相反情况下不适合使用前缀索引,比如,整个字段的长度为 20,索引选择性为 0.9,而我们对前 10 个字符建立前缀索引其选择性也只有...那么如果以前1-5位字符做前缀索引就会出现大量索引值重复的情况 索引值重复性越低 查询效率也就越高 前缀索引测试 200万 测试数据 在无任何索引的情况下随便查询一条 SELECT * FROM x_test...貌似查询的时间更长了 因为只第一位字符而言索引值的重读性太大了 200万条数据全以数字开头那么平均20万条的数据都是相同的索引值 重新建立前缀索引 这次以前4位字符来创建 alter table x_test...大大减少了索引值的重复性 查询速度从3秒提升到0.7秒 200万条数据都以数字开头 而0-9排列组合7位则可达到千万种组合 也就是以前7位来做索引则不会出现重复索引值的情况了 alter table
Redis 数据结构简介 Redis 可以存储键与5种不同数据结构类型之间的映射,这5种数据结构类型分别为String(字符串)、List(列表)、Set(集合)、Hash(散列)和 Zset(有序集合...两者的数据是不共通的;也就是说StringRedisTemplate只能管理StringRedisTemplate里面的数据,RedisTemplate只能管理RedisTemplate中的数据。...偏移开始和停止是基于零的索引,其中0是列表的第一个元素(列表的头部),1是下一个元素 使用:System.out.println(template.opsForList().range("list",0...,起始和停止都是基于0的索引 使用:System.out.println(template.opsForList().range("list",0,-1)); template.opsForList()...数据结构 Redis的Set是string类型的无序集合。
数据访问层的使用方法。 数据访问层的使用方法 一、操作语句部分 简单的说就是传入一个操作语句,然后接收返回值就可以了。为了简化代码和提高效率,所以呢设置了五种返回类型。...我们直接调用数据访问层的方法就可以了。 这里通过函数重载的方式来区分不同的数据类型。以C#里的数据类型为标准,对应SQL里面的数据类型。...四、存储过程的参数(2) 这里讲述如何设置输出型(output)的参数,以及如何修改参数值、取值和清除参数 1、 设置输出型参数 函数名称:addNewParameter(string ParameterName...因为一般在正式使用后发生的异常大多都是由于数据库造成的,所以很有可能在发生异常之后已经无法再向数据库里写信息了。而向文本文件里写信息一般是不会出错的。...由于省去了实体层,数据访问层也变成了DLL类库,所以说呢,从表面上看程序的结构就变成了一层结构了,也就是说只需写这些代码就可以实现一个模块的基本功能了。 再来看看添加修改的地方。
,是Apache Hadoop生态圈的新成员之一,专门为了对快速变化的数据进行快速分析,填补了以往Hadoop存储层的空缺,在前面的文章Fayson介绍了Kudu的安装及与Impala集成使用的文章,本篇文章...Fayson主要介绍如何使用Java API操作Kudu。...5.Impala访问集成 ---- 在这里通过Java API创建的Kudu表默认Impala是不能访问的,需要在Impala中执行如下建表语句: CREATE EXTERNAL TABLE `user_info...1.登录Hue,使用Impala引擎查看,未显示在Kudu下创建的user_info表 ? 2.在Hue执行建表SQL ? 3.查看user_info表数据 ? 执行Count操作 ?...6.总结 ---- 在使用Java API访问Kudu时如果跨了网络则需要增加配置--trusted_subnets=0.0.0.0/0将网络添加到受新人列表 通过Java API接口创建的Kudu表,
最近在研究Google Hacking,顺便在网上搜集一些搜索引擎的科学使用方法,科学正确的使用搜索引擎能获得很多的优质资源。...比如搜索:inurl:搜索引擎优化 返回的结果都是网址url 中包含“搜索引擎优化”的页面。由于关键词出现在url 中对排名有一定影响,使用inurl:搜索可以更准确地找到竞争对手。...例如 :allintitle:SEO 搜索引擎优化 就相当于:intitle:SEO intitle:搜索引擎优化 返回的是标题中中既包含“SEO”,也包含“搜索引擎优化”的页面 8、allinurl...11、linkdomain linkdomain:指令只适用于雅虎,返回的是某个域名的反向链接。雅虎的反向链接数据还比较准 确,是SEO 人员研究竞争对手外部链接情况的重要工具之一。...科学正确的使用谷歌: ?
,考虑到集群的安全企业不允许将生产环境的网络直接放通给办公网或外网访问,如果需要在办公网或是外网访问则需要通过反向代理的方式来实现,本篇文章主要介绍如何使用Nginx反向代理CDSW服务。...》和《如何利用Dnsmasq构建小型集群的本地DNS服务器》这里Fayson选择使用DNSmasq搭建DNS服务。.../ 本次测试选用的Nginx版本为Nginx1.8.6 关于Nginx的安装,这里就不再做说明了,大家可以参考Fayson前面的文章《如何使用Nginx实现Impala负载均衡》里面讲述了Nginx的安装及启停...include配置项的reverse-proxy.conf文件主要配置访问CDSW服务的反向代理。...,Nginx的反向代理域名和CDSW访问的域名是一致的,因为CDSW服务中有部分连接使用的是CDSW Master的HostName,所以我们使用相同的域名做反向代理后避免了跨域访问Session丢失导致访问权限问题
温馨提示:如果使用电脑查看图片不清晰,可以使用手机打开文章单击文中的图片放大查看高清原图。...Fayson的github: https://github.com/fayson/cdhproject 提示:代码块部分可以左右滑动查看噢 1 文档编写目的 在前面的文章Fayson介绍了《如何使用Java...连接Kerberos的HBase》,虽然非Kerberos环境下访问HBase比较简单,本篇文章Fayson还是主要介绍使用Java访问非Kerberos环境的HBase。...5 总结 1.Java开发访问HBase时,注意Connection对象不要重复创建,在使用完成后记得进行close操作,以避免频繁操作时将Zookeeper的连接数占满。...温馨提示:如果使用电脑查看图片不清晰,可以使用手机打开文章单击文中的图片放大查看高清原图。
温馨提示:如果使用电脑查看图片不清晰,可以使用手机打开文章单击文中的图片放大查看高清原图。...Fayson的github: https://github.com/fayson/cdhproject 提示:代码块部分可以左右滑动查看噢 1 文章编写目的 前面Fayson介绍了《如何使用Java API...访问HDFS为目录设置配额》,随着开发语言的多样性,也有基于Scala语言进行开发,本篇文章主要介绍如何使用Scala代码访问Kerberos环境的HDFS。...由于Fayson这里使用的是公网环境所以hostname与外网的ip对应,这里会导致一个问题在向集群put数据文件时会失败,如果开发环境和HDFS都属于内网环境则不会有这个问题。...3.查看HDFS上创建的目录、权限及ACL等 ? 未设置ACL权限的userc用户无权限访问该目录 ?
温馨提示:要看高清无码套图,请使用手机打开并单击图片放大查看。 1.文档编写目的 ---- CDH集群使用的Solr版本为4.10.3,Java开发中会经常使用到solrj客户端包访问Solr集群。...本篇文章主要讲述如何使用Java代码访问Kerberos和非Kerberos环境下的Solr集群。...CDH的依赖库,如果使用开源的4.10.3的依赖库会导致访问Kerberos环境下的Solr认证失败。...; e.printStackTrace(); } } /** * 使用JavaBean对象向Solr集群创建索引 *...6.总结 ---- 这里Fayson在调试代码时也遇到很多坑,比如CDH集群的Solr版本为4.10.3,但我选择的Solrj版本为7.10.1,在调试是能够正常查询Solr集群的数据,但不能向Solr
大数据可视化BI分析工具Apache Superset实现公网远程访问 前言 Superset是一款由中国知名科技公司开源的“现代化的企业级BI(商业智能)Web应用程序”,其通过创建和分享dashboard...通过Superset,用户可以轻松地从海量数据中提取有价值的信息,帮助企业做出更加明智的决策。另外,团队协作进行数据分析,可以结合国内流行的内网穿透工具实现公网的实时远程访问数据。 1....由于cpolar会为每个用户创建独立的数据隧道,并辅以用户密码和token码保证数据安全,因此我们在使用cpolar之前,需要进行用户注册。...设置固定连接公网地址 由于以上使用cpolar所创建的隧道使用的是随机公网地址,24小时内会随机变化,不利于长期远程访问。...最后,我们使用固定的公网地址访问superset,(两个地址复制哪一个都可以)可以看到访问成功,这样一个固定且永久不变的公网地址就设置好了,在外面就可以通过外网地址访问superset大数据系统了,随时随地查看数据
internal 用关键字 internal 定义的函数和状态变量只能在(当前合约或当前合约派生的合约)内部进行访问。...private 关键字 private 定义的函数和状态变量只对定义它的合约可见,该合约派生的合约都不能调用和访问该函数及状态变量。...综上可知,合约中修饰变量存储的关键字仅仅限制了其调用的范围,并没有限制其是否可读。所以我们今天就来带大家了解如何读取合约中的所有数据。...storage 中的数据会被写在区块链中(因此它们会更改状态),这就是为什么使用存储非常昂贵的原因。...slotA 表示变长数组声明的位置,用 length 表示变长数组的长度,用 slotV 表示变长数组数据存储的位置,用 value 表示变长数组某个数据的值,用 index 表示 value 对应的索引下标
接下来本篇文章将分享如何高效、正确的使用索引。...实践是检验真理的唯一途径,本篇只是站在索引使用的全局来定位的,你只需要通读全篇并结合具体的例子,或回忆以往使用过的地方,对整体有个全面认识,并理解索引是如何工作的,就可以了。...正确的顺序依赖于使用该索引的查询,并且同时需要考虑如何更好的满足排序和分组的需要(只用于B-Tree索引,哈希或者其他索引存储数据并不是顺序存储)。...当需要访问数据时(通过索引访问数据),在内存中直接搜索索引,然后通过索引找到磁盘相应数据,这也就是为什么索引不在key buffer命中时,速度慢的原因。...一些存储引擎,如MyISAM在内存中只缓存索引。数据则依赖于操作系统来缓存,因此要访问数据需要一次系统调用。这可能会导致严重的性能问题,尤其是那些系统调用占了数据访问中的最大开销的场景。
Fayson的github:https://github.com/fayson/cdhproject 提示:代码块部分可以左右滑动查看噢 1.文档编写目的 ---- 上一篇文章Fayson介绍了《如何使用...2.首先你必须按照上篇文章《如何使用HBase存储文本文件》的方式将文本文件保存到HBase中。 3.在Solr中建立collection,这里需要定义一个schema文件对应到HBase的表结构。...注意Solr在建立全文索引的过程中,必须指定唯一键(uniqueKey),类似主键,唯一确定一行数据,我们这里的示例使用的是HBase中的Rowkey。如果没有,你可以让solr自动生成。...7.总结 ---- 1.使用Lily Indexer可以很方便的对HBase中的数据在Solr中进行索引,包含HBase的二级索引,以及非结构化文本数据的全文索引。...2.使用Cloudera提供的Morphline工具,可以让你不需要编写一行代码,只需要通过使用一些配置文件就可以快速的对半/非机构化数据进行全文索引。
示例数据库 为了讨论索引策略,需要一个数据量不算小的数据库作为示例。本文选用MySQL官方文档中提供的示例数据库之一:employees。这个数据库关系复杂度适中,且数据量较大。...里面详细介绍了此数据库,并提供了下载地址和导入方法,如果有兴趣导入此数据库到自己的MySQL可以参考文中内容。...最左前缀原理与相关优化 高效使用索引的首要条件是知道什么样的查询会使用到索引,这个问题和B+Tree中的“最左前缀原理”有关,下面通过例子说明最左前缀原理。 这里先说一下联合索引的概念。...在上文中,我们都是假设索引只引用了单个的列,实际上,MySQL中的索引可以以一定顺序引用多个列,这种索引叫做联合索引,一般的,一个联合索引是一个有序元组,其中各个元素均为数据表的一列...这里有一点需要注意,理论上索引对顺序是敏感的,但是由于MySQL的查询优化器会自动调整where子句的条件顺序以使用适合的索引,例如我们将where中的条件顺序颠倒: EXPLAIN SELECT *
上面的查询从分析结果看用到了PRIMARY索引,但是key_len为4,说明只用到了索引的第一列前缀。...-+-------------+--------+------+---------------+---------+---------+-------+------+-------------+ 此时索引使用情况和情况二相同...如果想让from_date也使用索引而不是where过滤,可以增加一个辅助索引,此时上面的查询会使用这个索引。...除此之外,还可以使用一种称之为“隔离列”的优化方法,将emp_no与from_date之间的“坑”填上。...如果经过emp_no筛选后余下很多数据,则后者性能优势会更加明显。当然,如果title的值很多,用填坑就不合适了,必须建立辅助索引。
,但是如果通配符不是只出现在末尾,则无法使用索引。...这里特别要说明MySQL一个有意思的地方,那就是仅用explain可能无法区分范围索引和多值匹配,因为在type中这两者都显示为range。...可以看到这个查询用到了索引全部三个列。因此在MySQL中要谨慎地区分多值匹配和范围匹配,否则会对MySQL的行为产生困惑。...情况七:查询条件中含有函数或表达式 很不幸,如果查询条件中含有函数或表达式,则MySQL不会为这列使用索引(虽然某些在数学意义上可以使用)。...,但是由于查询条件是一个表达式,MySQL无法为其使用索引。
的功能之外,它还增加了排序和分页查询的功能。...在pom.xml文件中加入mysql-connector-java依赖以及spring-boot-starter-data-jpa依赖,pom.xml文件配置与“示例 使用CrudRepository接口访问数据...(3)创建持久化类 (4)定义数据访问层接口 在Spring Boot项目中数据访问层无需提供实现,直接继承数据访问接口即可。...(5)定义业务层类 在业务层中需要注入数据访问层对象,在上述代码中我们是通过@Resources注解将ArticleRepository接口对应的实现类注入进来的。...(6)定义控制器类 (7)测试应用 启动Mysql数据库,继续使用之前在数据库中创建的springdatajpa数据库,然后在org.fkit.pagingAndSortingRepositorytest
温馨提示:如果使用电脑查看图片不清晰,可以使用手机打开文章单击文中的图片放大查看高清原图。...Fayson的github: https://github.com/fayson/cdhproject 提示:代码块部分可以左右滑动查看噢 1 文档编写目的 前面Fayson介绍了《如何使用Java API...访问CDH的Kudu》,文章是在非安全环境下实现,随着对集群安全要求的提高,在Kerberos环境下的使用API访问Kudu也会有一些变化,本篇文章Fayson主要介绍如何使用Java代码访问Kerberos...2.访问Kerberos环境下的Kudu时,需要使用HDFS API提供的UserGroupInformation类实现Kerberos账号登录认证,该API在登录Kerberos认证后,会启动一个线程定时的刷新认证...温馨提示:如果使用电脑查看图片不清晰,可以使用手机打开文章单击文中的图片放大查看高清原图。 推荐关注Hadoop实操,第一时间,分享更多Hadoop干货,欢迎转发和分享。
领取专属 10元无门槛券
手把手带您无忧上云