Gremlin是Apache TinkerPop 框架下的图遍历语言，而TinkerPop是JanusGraph的搜索引擎。Gremlin是一种函数式数据流语言，可以使得用户使用简洁的方式表述复杂的属性图（property graph）的遍历或查询。
文章的开头我们先来看下什么是图数据库，根据维基百科的定义：图数据库是使用图结构进行语义查询的数据库，它使用节点、边和属性来表示和存储数据。
Gremlin是JanusGraph的查询语言，用于从图中检索数据和更新数据。 Gremlin是一种面向路径的语言，它能够简洁地表示复杂的图形遍历和多步操作。 Gremlin是一种函数式语言，遍历运算被链接在一起形成类似路径的表达式。 例如，“从Hercules，遍历他的父亲，然后他父亲的父亲，并返回祖父的名字。”
图形数据库是 NoSQL 数据库的一种类型，它应用图形理论存储实体之间的关系信息。最常见的例子，就是社会网络中人与人之间的关系。关系型数据库用于存储关系型数据的效果并不好，其查询复杂、缓慢、超出预期，而图形数据库的独特设计恰恰弥补了这个缺陷。Google的图形计算系统名为 Pregel。
gremlin的查询是流式查询，一步一步的进行下去，当然这里的“一步”可能是一个方法（g.V().has()）也可能是多个方法组成的一步(g.V().order().by(desc,‘age’))。下面看一个案例
本节将使用Gods图作为演示示例，此图在JanusGraph演示中广泛使用。该图如下图所示。这个抽象的数据模型对应图模型中的属性，这个特定的实例描述了罗马万神殿中人物和地点之间的关系。此外，图中的特殊文本和符号修饰符(如：粗体、下划线等)表示图中不同的示意图/类型。
金融机构每年因欺诈带来的坏账损失每年高达数百万美元。随着在线数据量的增长，骗子的行骗能力也水涨船高，精心设计的骗局、身份窃取、欺诈手段及一些新型的诈骗手段层出不穷，方法复杂且容易广泛复制，当事后发现时，已经太迟了，客户和企业往往已经损失惨重。
Titan是一个高度可扩展的开源图形数据库。图形数据库是一种NoSQL数据库，其中所有数据都存储为节点（nodes）和边（edges）。图形数据库适用于高度连接数据的应用程序，其中数据之间的关系是应用程序功能的重要部分，如社交网站。Titan用于存储和查询分布在多台机器上的大量数据。它可以使用各种存储后端，如Apache Cassandra，HBase和BerkeleyDB。在本教程中，您将安装Titan 1.0，然后配置Titan以使用Cassandra和ElasticSearch。Cassandra充当保存底层数据的数据存储区，而ElasticSearch是一个自由文本搜索引擎，可用于在数据库中执行一些复杂的搜索操作。您还将使用Gremlin从数据库创建和查询数据。
你已沉沉睡去，却突然被闹钟的铃声惊醒。揉揉眼睛，你点亮手机，发现是凌晨三点。好吧，又出问题了。
本文描述了在电商场景中，如何使用阿里云MaxCompute来实现电商订单数据的ETL处理。主要包括了以下步骤：首先在MaxCompute中创建项目，然后使用DataHub模块中的Sqoop组件来实现数据的导入，接着使用DataHub中的Hive表作为外部表，通过Hive SQL进行数据处理。在处理过程中，使用MaxCompute提供的内置函数和UDF进行数据处理，最后将处理后的数据导出到Hdfs。
元数据打通数据源、数据仓库、数据应用，记录了数据从产生到消费的完整链路。它包含静态的表、列、分区信息（也就是MetaStore）；动态的任务、表依赖映射关系；数据仓库的模型定义、数据生命周期；以及ETL任务调度信息、输入输出等。
在python中，数据类型主要由以下几类组成： 列表（list）: [a, b] 元组（tuple）：（a, b, ） 集合（set）： {a, b} 字典（Dictonary）: {a: ‘aaa’, b: ‘bbb’} 1. 列表 列表(List) 列表是Python中使用最频繁的数据类型，专门用于存储一串信息 列表是一种有序和可更改的集合。允许重复的元素 列表使用[]定义，元素之间使用，分隔。例：[1,2, ...] 列表的索引从位置0开始 索引就是元素在列表中的位置编号，索引又可以被称为下标 注意
tinkerpop是一个图库标准，一个框架，学习图库，先从这个项目入手比较合适, neo4j, janusGraph只是它两个组件（图storage-engine）的vendor而已。图库是节点&边的集合，边描述了节点间的关联关系。
本文的内容最初由Marko Rodriguez和Bobby Norton在Aurelius博客上共同撰写。
JanusGraph使用Gremlin Server引擎作为服务组件来处理和响应客户端查询。 当打包在JanusGraph中时，Gremlin Server被称为JanusGraph Server。
POST http://localhost:8080/graphs/hugegraph/schema/indexlabels
在关系型数据库管理系统（RDBMS）中，连接查询是一项重要的数据库操作，它允许我们从多个表中检索和组合数据，以便进行更复杂的查询和分析。
这里有个关键词”semantic queries”，与之相对应的可能是形式语言（Formal Language）中只关心句法。最让人心碎的是：
以上内容是对 MySQL 数据库表操作的讲述、后续更新内容从分组开始、详细内容请听下回分解
参考文档 https://www.cnblogs.com/dongling/p/5710643.html
单个物理维度可以被事实表多次引用，每个引用连接逻辑上存在差异的角色维度。例如，事实表可以有多个日期，每个日期通过外键引用不同的日期维度，原则上每个外键表示不同的日期维度视图，这样引用具
这篇文章最初由Stephen Mallette和Daniel Kuppitz在Aurelius发表。
图数据库JanusGraph介绍及使用(一)：简介 https://blog.csdn.net/gobitan/article/details/80939224
浪尖的粉丝应该很久没见浪尖发过spark源码解读的文章，今天浪尖在这里给大家分享一篇文章，帮助大家进一步理解rdd如何在spark中被计算的，同时解释一下coalesce降低分区的原理及使用问题。
此次升级有超过1900个commit，包括在JIT、ONNX、分布式、性能以及前端等方面的大量改进。
最近想着把工作中常用到的技术点与工具做一些整理总结，一方面梳理一下这些知识点，加深使用记忆，也可以作为之后使用的查阅。
我将直接切入主题，Jaeger目前只可视化收集来自测仪应用程序的数据。它不执行任何后处理（除了服务依赖关系图）或任何计算，以从它收集的跟踪中获得其他有趣的指标或特性。这是一个遗憾，因为跟踪包含了所有遥测信号中最丰富的信息！
Apache TinkerPop 提供了图数据库的抽象接口，方便第三方实现自己的图数据库以接入TinkerPop 技术栈，享受TinkerPop 的Gremlin、算法等福利。TinkerPop将这些第三方称为“Provider ”，知名的Provider包含janusGraph、neo4j、hugegraph等。
无监督接触预测 (Unsupervised Contact Prediction) 是在蛋白质结构测定和设计过程中揭示蛋白质物理、结构和功能约束的核心。几十年来，主要的方法是从一组相关序列中推断进化约束。在过去的一年里，蛋白质语言模型已经成为一种潜在的替代方法，但目前性能还没有达到生物信息学中最先进的方法。本文证明了Transformer的注意图 (Attention Map) 能够从无监督语言建模目标中学习蛋白质序列中各个残基之间的接触距离。我们发现，迄今为止已经训练过的最高容量模型已经优于当前最先进的无监督接触预测的工作流程，这表明过去这些繁琐的工作流程可以用端到端模型的单向传递工作流程来代替。
存储大规模知识图谱，且便于对知识进行更新，但当知识图谱查询的选择性较大时，查询性能明显下降
关于null相关的函数在日常的工作中还有比较实用的，可能会碰到各种和Null校验相关的情况，大体有以下几种。 case when decode nvl nvl2 lnnvl nullif coalsce -->case when case when算是这个比较通用的方法，可以支持各种复杂的逻辑判断，对于Null的校验也不在话下，可能相对来说程序会略显臃肿。在性能方面还没有做更多的测试，暂时不好评估。 SQL> select case when (1=1) then 2 end from dual;
以上实例中使用了LEFT JOIN，该语句会读取左边的数据表runoob_tbl的所有选取的字段数据，即便在右侧表tcount_tbl中没有对应的runoob_author字段值。
以前在工作中主要写Spark SQL相关的代码，对于RDD的学习有些疏漏。本周工作中学习了一些简单的RDD的知识，主要是关于RDD分区相关的内容。下面的内容都是自己亲身实践所得，如果有错误的地方，还希望大家批评指正。
目前我们的图数据库数据量为 顶点 20 亿，边 200 亿的规模。在迁移之前我们使用的 AgensGraph 数据库 一个主库四个备库，机器的配置都比较高，256G 内存 SSD 的磁盘，单机数据量为 3T左右。 在数据量比较小的情况下 AgensGraph 表现非常稳定优异，我们之前一主一备的情况下支撑了很长一段时间。 但随着公司业务的急速发展，图越来越大，占用的磁盘越来越多，对应的查询量也越来越大，随之这种方案的问题就暴露出来了
要是分区数比现有的分区数多的话,只能使用 ADD来添加分区数.下面就表示增加了6个分区数
列表虽然好，但是如果需要快速的数据查找，就必须进行需要遍历，也就是最坏情况需要遍历完一遍才能找到需要的那个数据，时间复杂度是O(n)，显然这个速度是很难接受的，于是就必须要有新的数据结构出现，于是字典就诞生了！
在做自动化运维开发过程中，需要从information_schema.tables获取MySQL表相关的元信息，发现MySQL8.0和5.7存在的差异还是比较大的；在MySQL8.0以前，通常会通过infomation_schema的表来获取一些元数据，例如从tables表中获取表的下一个auto_increment值，从indexes表获取索引的相关信息等。
终于可以开原创标识和留言功能了，开心。我坚信努力总会有收获的。 不仅SQL， 对所有的编程语言来说，函数都起着至关重要的作用。函数就像是编程语言的“道具箱”，每种编程语言都准备了非常多的函数。譬如，C语言推崇的就是用函数来实现模块化编程。 根据用途不同，SQL中的函数大致可以分为算术函数、字符串函数、日期函数、转换函数和聚合函数。 一：函数的种类 1：函数的定义 所谓函数，就是输入某一值得到相应输出结果的功能，输入值称为参数，输出值称为返回值。 2：函数的分类 函数大致可以分为以下几种： 算术函数（用来
最近一直在研究关于POSTGRESQL 开发方面的一些技巧和问题，本期是关于在开发中的一些关于NULL 值处理的问题。在业务开发中，经常会遇到输入的值为NULL 但是实际上我们需要代入默认值的问题，而通常的处理方法是，在字段加入默认值设置，让不输入的情况下，替换NULL值，同时还具备另一个字段类型转换的功能。
使用电影评分数据进行数据分析，分别使用DSL编程和SQL编程，熟悉数据处理函数及SQL使用，业务需求说明：
3 月份，eKuiper 团队主要进行了 1.9.0 版本的开发，增加了一些重要的功能，进一步提高了 eKuiper 的性能和可用性：
name =’Argentina’ or name =’Australia’等同于 name in IN(‘Argentina’,’Australia’)
Apache软件基金会最近宣布：TinkerPop 升级为顶级项目 TinkerPop 是一个图计算框架，用来进行实时的事务型处理，和批量的图分析，包含了一系列以 Gremlin 引擎为核心的子项目和模块 图是一种描述数据存储结构的方式，比如键值对结构，也是存储数据的一种方式，只是图结构更为复杂 图是由顶点和边组成的，点和边各自都可以包含任意多个键值对形式的属性 点是用来描述离散的对象，例如 人、地点、事件 边是对点之间关系的描述，例如，一个人可以认识另一个人、一个人参与了某件事、一个人在某个地方 属性描述
进行python与mysql的交互需要安装pymysql库，安装也很简单，常规的pip install pymysql就可以了。
数据库（Database）是按照数据结构来组织、存储和管理数据的仓库，每个数据库都有一个或多个不同的API用于创建，访问，管理，搜索和复制所保存的数据。我们也可以将数据存储在文件中，但是在文件中读写数据速度相对较慢。 所以，现在我们使用关系型数据库管理系统（RDBMS）来存储和管理的大数据量。所谓的关系型数据库，是建立在关系模型基础上的数据库，借助于集合代数等数学概念和方法来处理数据库中的数据。 RDBMS即关系数据库管理系统(Relational Database Management System)的特点： （1）数据以表格的形式出现 （2）每行为各种记录名称 （3）每列为记录名称所对应的数据域 （4）许多的行和列组成一张表单 （5）若干的表单组成database
最后是今天的分享：Author、Article、ArticleDetail三张表一键建表SQL语句
可以使用ConfiguredGraphFactory去配置JanusGraph Server。 ConfiguredGraphFactory是图的一种访问方式，类似于JanusGraphFactory。 这些图的工厂类提供了动态管理托管在服务器上的图的方法。
注意数值，字符串，时间 自增，默认，非空，注释 索引，外键 字符集，存储引擎
领取专属 10元无门槛券
手把手带您无忧上云
云服务器
即时通信 IM
ICP备案
对象存储
实时音视频
