最近接触的一些项目大搞国产化,著名的关系型数据库厂商都在美国,有Oracle的Oracle和MySQL数据库、IBM的DB2、微软的SQL Server等。今天细说一下国内的数据库厂商。
GBase 8s 是天津南大通用数据技术股份有限公司自主研发的、成熟稳定的基于共享存储的数据库集群,拥有自主知识产权,支持集中式部署、共享存储高可用部署、两地三中心高可用部署,具备高容量、高并发、高性能等特性,本次学习打算部署单机模式。
这里只列出部分结果,其它的详细内容可以参考:https://share.weiyun.com/5lb2U2M
上一次发文,好像还是上一次,鸽了这么久,开始还是有一些心理负担的,但是时间长了,好像就坦然了一些,但问题终究还是要面对的,所以今天我来了。。。
以上配置完成之后,默认查询的数据库是master 因为配置里面有一个primary: master
南大通用gbase8a MPP Cluster是一款分析型MPP数据库,有个特性鲜明的功能就是智能索引。该索引建立膨胀率不超过百分之一,包含基于列的统计信息,可以有效过滤数据,大幅降低数据库磁盘IO,尤其是在聚合操作上也能达到很高的性能。
南大通用的 GBase 数据库在墨天轮国产数据库排行榜 20 年底的最后两月还一度上升到第三名,这是值得可喜可贺的,在本月排名为第七名,得分为 336.03,分数较上月增加了 23.13,总体而言一直处于上升趋势,希望 GBase 数据库再接再厉更上一层楼。
Tapdata Cloud 是国内首家异构数据库实时同步云平台,目前支持Oracle、MySQL、PG、SQL Server、MongoDB、ES 、达梦、Kafka、阿里云数仓 AnalyticDB MySQL、GP、MQ之间的数据同步,即将支持 DB2、Sybase ASE、Redis、GBase、GaussDB 等,并对用户永久免费。
Mybatis-Flex 是一个优雅的 Mybatis 增强框架,它非常轻量、同时拥有极高的性能与灵活性。我们可以轻松的使用 Mybaits-Flex 链接任何数据库,其内置的 QueryWrapper^亮点 帮助我们极大的减少了 SQL 编写的工作的同时,减少出错的可能性。
一段人类的日常对话通常可以分解为引子、记忆、分析三个部分。计算机自然语言处理的解法,AI科学家归纳出一个CPV结构:以ChatGPT为代表的大模型承担“分析”,Vector Database(向量数据库)承担“记忆”,Prompt(提示词)承担“引子”。
编辑说明:国产数据库流行度排行榜,是墨天轮网站根据数据库的受欢迎程度对国产数据库进行排名,排行榜每月更新。排行榜自2020年9月推出,已收录了105个国产数据库产品。积分数据考量了多重互联网上可以普遍获得的公开因素,欢迎读者继续提供有价值的信息源,以期更客观的反映国产数据库的流行度。
自2022年3月初,数据猿正式推出以“数智力·新格局”为主题的“2022行业盘点季大型主题策划活动”以来,此次涵盖❶访谈调研+❷企业盘点&内容选题合作+❸产业图谱+❹榜单/奖项于一体的半年度大型媒体策划活动受到了业界各方数百家企业的踊跃报名参与。 数据猿作为一家致力于“聚焦数智·改变商业”的数据智能产业创新服务媒体,以推动大数据、人工智能、云计算、物联网、5G等新技术在产业中的应用与发展为宗旨,希望以媒体的力量与方式推动产业的发展与行业的进步。 在历经数月的时间里,由数据猿内部员工组成的初审小组、核心粉丝群组成的公审团,以及外部行业专家成员组成的终审团,通过直接申报交流、访谈调研、外界咨询评价、匿名访问等交叉验证的层层筛选推荐机制下,最终制作形成了《2022中国国产数据库领域最具商业合作价值企业盘点》 以下是本期盘点的相关内容,经数据猿整理发布:
在主节点 gbase8c 执行 $ gsql -d postgres -p 5432,出现 postgres=# 操作符说明客户端工具 gsql 成功连接 GBase 8c 数据库。
数据猿导读 随着数据量的不断增大、接入的系统越来越多,系统加工效率逐步降低,满足内部数据分析和监管机构的监管数据不断增加的需求,农业银行在2013年开始建设完全自主可控的大数据平台。 本篇案例为数据猿
最近参加了 GBase 数据库训练营的培训,学习过程中,需要安装部署 GBase 8a MPP Cluster 集群环境,本次仅做记录以供参考。 官方安装教程:E01 GBase 8a MPP Cluster V95 安装和卸载
如果遇到 IPV6 protocol not supported,please turn it on…的错误提示,请手动开启 IPV6,执行:
【前言】作为中国的 “Fivetran/Airbyte”, Tapdata Cloud 自去年发布云版公测以来,吸引了近万名用户的注册使用。应社区用户上生产系统的要求,Tapdata Cloud 3.0 将正式推出商业版服务,提供对生产系统的 SLA 支撑。Tapdata 目前专注在实时数据同步和集成领域,核心场景包括以下几大类: √ 实时数据库同步,如Oracle - Oracle, Oracle - MySQL, MySQL - MySQL 等 √ 数据入湖入仓,或者为现代数据平台供数,如: △ 常规 ETL 任务(建宽表,数据清洗,脱敏等) △ 为 Kafka/MQ/Bitsflow 供数或下推
2021-01-13:很多列的数据,任意一列组合查询,mysql能做到,但是上亿的数据量做不到了,查的时候非常慢。我们需要一个引擎来支持它。这个引擎你有了解过吗?
我们在编译或使用一些数据同步软件时候,比如Datax、FlinkX、Kettle等,由于此类ETL软件连接的数据库较多,软件本身不提供各类数据库的驱动包,maven也无法找到相应的包,互联网上各类下载不是需要积分就是收费,很是不爽,因此通过在本人使用ETL软件过程中,整理的驱动包提供有需要的同胞使用,避免去互联网上花费较多的时间搜索。
2022年10月24日,南大通用宣布完成了新一轮的融资,融资了数亿元,这算是一次比较大规模的融资了。
有个粉丝朋友和我聊到,大约是16年刚毕业时,工作原因给客户单位部署安装系统,绝大多数单位都是oracle数据库,只有一个安全级别极高的单位使用的是达梦数据库,印象中非常不好用。
Tapdata Cloud 是国内首家异构数据库实时同步云平台,目前支持Oracle、MySQL、PG、SQL Server、MongoDB、ES 、达梦、Kafka、GP、MQ、ClickHouse、Hazelcast Cloud、ADB MySQL、ADB PostgreSQL、KunDB、TiDB、Dummy DB之间的数据同步,即将支持 DB2、Sybase ASE、Redis、GBase、GaussDB 等,并对用户永久免费。
本篇文章,首先会向大家阐述什么是 Flink connector 和 CDC , 然后会通过手把手的方式和大家一起构建一个简单的GBase8s的Flink connector,并完成实践项目,即通过Mysql CDC实时通过connector同步数据到GBase8s中。
Tapdata Cloud 是国内首家异构数据库实时同步云平台,目前支持Oracle、MySQL、PG、SQL Server、MongoDB、ES 、达梦、Kafka、GP、MQ、ClickHouse、Hazelcast Cloud、ADB MySQL、ADB PostgreSQL、KunDB之间的数据同步,即将支持 DB2、Sybase ASE、Redis、GBase、GaussDB 等,并对用户永久免费。
在本文中,我们将实践 GBase8s 和 MySQL 的跨数据源联合查询,案例中 MySQL 数据源中存放商品信息,GBase8s 数据源中存放订单信息。整体架构如下
锁的对象是数据库中的数据对象,如关系型数据库中的表、记录、属性、索引等, 对数据对象加锁的时机是在事务对其进行操作之前,向系统发出加锁请求。加锁后事务 T 就取得了对该数据对象的控制,在事务 T 释放它的锁之前,其他事务不能对此数据对象进 行任何操作。封锁是一种排队机制,将并行任务按锁的先后顺序排队,把并行任务变成串行任务。
https://gbasedbt.com/dl/AutoInit_GBase8s/latest/
关闭 Selinux 之后需要重启主机才能生效,这里使用 setenforce 0 临时生效。
Tapdata Cloud 是国内首家异构数据库实时同步云平台,目前支持 Oracle、MySQL、PG、SQL Server、MongoDB、ES 、达梦、Kafka之间的数据同步,即将支持 DB2、Sybase ASE、Redis、GBase、GaussDB 等,并对用户永久免费。
最近遇到一个有意思的需求,即某个字段里面存放着一些列数字,以逗号分割,数字两两一组,33.112,23.11,22.321,24.3333没错,每一组就是一个坐标,现在需要将他们处理成Json字符串 [{"lnt":"23.11","lat":"33.112"},{"lnt":"24.3333","lat":"22.321"}],相信使用SPL也可以实现,但是,今天我们用一种对java程序员更友好的方式来解决这一问题,没错就是UDR(用户自定义例程)。
2015年12月10-12日,由中国计算机学会(CCF)主办,CCF大数据专家委员会承办,中国科学院计算技术研究所、北京中科天玑科技有限公司与CSDN共同协办,以“数据安全、深度分析、行业应用”为主题的 2015中国大数据技术大会 (Big Data Technology Conference 2015,BDTC 2015)在北京新云南皇冠假日酒店盛大开幕。 2015中国大数据技术大会第二天的数据库分论坛分论坛中,来自南大通用、西北工业大学、中国移动苏州研发中心、 华东师范大学、Pivotal的专家与教授分
墨天轮社区每个月都会出一个国产数据库的榜单,就像国内版的DB-Engines,通过他可以了解每个月国产数据库的方向,
墨墨导读:在数据库的世界里,国产数据库仍然属于初生的小苗,成长的儿童,所以让我们一起祝国产数据库儿童节快乐!也让我们一起坚定的支持国产数据库的发展、成长、壮大。
宿主机:32g内存,8g swap,需要保证每台机器至少4g内存+8g swap,否则不能安装。。。
全部介绍请参考:https://www.xmmup.com/shujukuxunjianjiaoben.html
Tapdata Cloud 是国内首家异构数据库实时同步云平台,目前支持Oracle、MySQL、PG、SQL Server、MongoDB、ES 、达梦、Kafka、GP、MQ、ClickHouse、Hazelcast Cloud、ADB MySQL、ADB PostgreSQL、KunDB、TiDB、Dummy DB、MariaDB之间的数据同步,即将支持 DB2、Sybase ASE、Redis、GBase、GaussDB 等,并对用户永久免费。
墨墨导读:2020年10月国产数据库流行度的前三位由 TiDB、达梦数据库、GBase(南大通用)获得,其中 TiDB 以超过 100分的优势领先第二位的达梦数据库。
摘要:很多 DBA 同学经常会遇到要从一个数据库实时同步到另一个数据库的问题,同构数据还相对容易,遇上异构数据、表多、数据量大等情况就难以同步。我自己亲测了一种方式,可以非常方便地完成 MySQL 数据实时同步到ADB MySQL,跟大家分享一下,希望对你有帮助。
exchange是要打造一个轻量级,高扩展性的数据交换平台,支持对结构化及无结构化的异构数据源之间的数据传输,在应用层上具有数据权限管控、节点服务高可用和多租户资源隔离等业务特性,而在数据层上又具有传输架构多样化、模块插件化和组件低耦合等架构特点。
关于浪潮收购数据库厂商的传言从来就没能停止过,而从去年起T哥就有浪潮内部传闻,浪潮有意收购IBM数据库,但到底是Informix还是Db2完全要看IBM准备出售哪个,据内情人透露,收购IBM全球数据库业务的可能性不大,但是收购中国区的运营和开发自主权是非常有可能的。 可是传言必竟是传言,随后又相继传出浪潮有意收购韩国数据库公司顶天立地和南大通用两家,为此笔者也向浪潮的高管成员求证此事,浪潮高管表示浪潮要想实现软硬件一体化的目标,数据库是他们的硬伤,可见浪潮对于数据库渴求和迫切,可也有业内人士表示,浪潮收购一
摘要:很多 DBA 同学经常会遇到要从一个数据库实时同步到另一个数据库的问题,同构数据还相对容易,遇上异构数据、表多、数据量大等情况就难以同步。我自己亲测了一种方式,可以非常方便地完成 MySQL 数据实时同步到DM DB 达梦数据库,跟大家分享一下,希望对你有帮助。
摘要:很多 DBA 同学经常会遇到要从一个数据库实时同步到另一个数据库的问题,同构数据还相对容易,遇上异构数据、表多、数据量大等情况就难以同步。我自己亲测了一种方式,可以非常方便地完成 MySQL 数据实时同步到ClickHouse,跟大家分享一下,希望对你有帮助。
传统的关系型数据库,如 Oracle、DB2、MySQL、SQL SERVER 等采用行式存储法(Row-based),在基于行式存储的数据库中, 数据是按照行数据为基础逻辑存储单元进行存储的, 一行中的数据在存储介质中以连续存储形式存在。
摘要:很多 DBA 同学经常会遇到要从一个数据库实时同步到另一个数据库的问题,同构数据还相对容易,遇上异构数据、表多、数据量大等情况就难以同步。我自己亲测了一种方式,可以非常方便地完成 MySQL 数据实时同步到ADB PostgreSQL,跟大家分享一下,希望对你有帮助。
摘要:很多 DBA 同学经常会遇到要从一个数据库实时同步到另一个数据库的问题,同构数据还相对容易,遇上异构数据、表多、数据量大等情况就难以同步。我自己亲测了一种方式,可以非常方便地完成 MySQL 数据实时同步到Greenplum,跟大家分享一下,希望对你有帮助。
领取专属 10元无门槛券
手把手带您无忧上云