腾讯云开发者社区-腾讯云

开发者社区

文档建议反馈控制台

最新优惠活动

文章/答案/技术大牛

发布

函数式编程语言及工具

专栏作者

283

文章

264537

阅读量

67

订阅数

search（0）- 企业搜索，写在前面

大数据数据库 mongodb sql 云数据库 MongoDB

计划研究一下搜索search，然后写个学习过程系列博客。开动之前先说说学习搜索的目的：不是想开发个什么搜索引擎，而是想用现成的搜索引擎在传统信息系统中引进搜索的概念和方法。对我来说，传统的管理系统legacy i.t system已经走到了尽头。根本原因是信息在量上的爆发增长，传统数据管理方式已经无法兼顾了。在我看来，除了交易管理，传统的关系数据库方式在业务管理的其它方面，特别是业务相关的数据分析、决策支持等肯定是力不从心了，这些从持续多年我所经历的数据库红色锁标记就很有说服力了。无可否认，必须想办法在大数据、分布式计算方面寻找合适的解决方案。前两年已经完成了一系列分布式计算、分布式数据库，分布式流处理等博客，足够构建一个分布式大数据平台来实现对海量数据的存储、处理了。剩下最重要的问题是如何使用平台上的这些数据，即如何能轻松又高效的使用大数据，否则前面一切努力将化为乌有。现在最迫切的需求（我认为的）就是如何对这些大数据进行高效的分析、关联，组合然后产生全面、精准的业务决策或者系统使用的支持数据。也就是说可以通过搜索把大数据平台上的数据按照业务管理要求的信息内容、表现形式提供给前端系统。

2020-03-19

8810

SDP（6）：分布式数据库运算环境- Cassandra-Engine

分布式数据库大数据存储人工智能

现代信息系统应该是避不开大数据处理的。作为一个通用的系统集成工具也必须具备大数据存储和读取能力。cassandra是一种分布式的数据库，具备了分布式数据库高可用性（high-availability）特性，对于一个实时大型分布式集成系统来说是核心支柱。与传统的关系数据库对比，cassandra从数据存储结构、读取方式等可以说是皆然不同的。如：cassandra库表设计是反范式的（denormalized）、表结构设计是反过来根据query要求设计的，等等。幸运的是自版本3.0后cassandra提供

2018-03-16

1.6K0

SDP（10）：文本式大数据运算环境-MongoDB-Engine功能设计

mongodb 大数据

为了让前面规划的互联网+数据平台能有效对电子商务数据进行管理及实现大数据统计功能，必须在平台上再增加一个MongDB-Engine：数据平台用户通过传入一种Context来指示MongoDB-Engine运算。与前面JDBC-Engine和Cassandra-Engine通过文本式传递指令不同的是：MangoDB没有一套像SQL或CQL这样的文本式编程语言。但MangoDB基本上都是通过Bson类型的参数进行运算的，Bson是个java interface： /** * An interface

2018-03-16

1K0

FunDA（0）－ Functional Data Access accessible to all

数据库数据处理 sql 大数据

2018-01-05

1K0

Scalaz（54）－ scalaz-stream: 函数式多线程编程模式－Free Streaming Programming Model

scala 大数据

该文介绍了如何使用Free Monad和Scalaz-Stream实现一个功能类似于命令行交互的程序。通过Free Monad和Scalaz-Stream，可以编写异步代码，实现多线程和分布式计算，同时避免使用回调函数和事件循环。该示例使用了Scalaz的Task和Process，以及Apache Arrow的Array和Record，通过这些工具，可以高效地处理大量数据。

2018-01-05

5370

泛函编程（22）－泛函数据类型－Monoid In Action

编程算法大数据

在上一节我们讨论了Monoid的结合性和恒等值的作用以及Monoid如何与串类元素折叠算法相匹配。不过我们只示范了一下基础类型（primitive type）Monoid实例的应用，所以上一节

2018-01-04

1.1K0

没有更多了

社区活动

腾讯技术创作狂欢月

“码”上创作 21 天，分 10000 元奖品池！

Python精品学习库

代码在线跑，知识轻松学

博客搬家 | 分享价值百万资源包

自行/邀约他人一键搬运博客，速成社区影响力并领取好礼

技术创作特训营·精选知识专栏

往期视频·千货材料·成员作品最新动态