一张图教你入门大数据

作者:binro 来源: http://blog.csdn.net/jor_el/article/details/13400673

大数据

1 概念

1.1 在时间复杂度和能量复杂度有限的前提下,输入:大数据D,输出:问题的解f(D)

2 技术点

2.1 大数据获取

互联网

物理世界信息

2.2 大数据的传输

安全可靠传输的理论和算法

大数据传输的调度和控制

在传输的过程中继续进行计算

2.3 大数据可用性

量质融合管理

劣质容忍原理

深度演化机制

2.4 共性问题

结构化算法

非结构化算法

2.5 安全与隐私

3 可能的改革

3.1 大数据硬件适配

通讯瓶颈

能量消耗

3.2 软件平台

程序设备模型

4 难点

4.1 计算

算法设计

线性和亚线性算法

数据压缩算法

无解压计算

基于抽样方法的计算

增量式的方法

基于主数据计算

云计算下的并行计算

4.2 数据可用性

量质融合管理

劣质容忍原理

深度演化机制

4.3 学科交叉

原文发布于微信公众号 - 马哥Linux运维(magedu-Linux)

原文发表时间:2017-05-10

本文参与腾讯云自媒体分享计划,欢迎正在阅读的你也加入,一起分享。

发表于

我来说两句

0 条评论
登录 后参与评论

相关文章

来自专栏IT大咖说

自主研发、不断总结经验,美团搜索推荐机器学习平台

内容来源:2018 年 5 月 26 日,美团点评技术专家杨一帆在“饿了么技术沙龙·第25弹【搜索推荐】”进行《Why WAI: 美团点评搜索推荐机器学习平台》...

3305
来自专栏机器之心

业界 | Apache MXNet 发布 v0.11.0版,支持苹果Core ML和Keras v1.2

选自AWS 机器之心编译 参与:黄小天、路雪 近日,孵化于 Apache 软件基金会 Apache MXNet 发布了 v0.11.0 最终测试版本,它不仅具有...

32913
来自专栏数据派THU

怎样构建中文文本标注工具?(附工具、代码、论文等资源)

来源:Paperweekly 本文长度为2218字,建议阅读4分钟 本文为你介绍中文文本标注工具的构建方法,并提供多个开源文本标注工具。 项目地址: https...

1.3K7
来自专栏石瞳禅的互联网实验室

【TensorFlow实战——笔记】第2章:TensorFlow和其他深度学习框架的对比

可以看到各大主流框架基本都支持Python,目前Python在科学计算和数据挖掘领域可以说是独领风骚。虽然有来自R、Julia等语言的竞争压力,但是Python...

1311
来自专栏华章科技

机器学习和深度学习视频资料精选(附学习资料)

pandax视频教程 链接: https://pan.baidu.com/s/1pLqavVX 密码: fath python入门到精通 链接: http...

1843
来自专栏iOSDevLog

day2-Machine Learning Yearning图片上传失败,请查看原文:https://github.com/iOSDevLog/100-days-of-ai/blob/master/r

假设您的系统是使用复杂的机器学习流水线构建的, 并且您希望提高系统的性能。你应该在哪些方面努力改进?通过将错误归因于流水线的特定组件, 您可以决定如何排定工作的...

1391
来自专栏数说工作室

logistic回归建模指南

昨天的logistic回归:从生产到使用【上:使用篇】(在微信公众号“数说工作室”中回复“logit1”查看),有不少数说网友们建议把最后的建模指南图单独发一下...

3498
来自专栏mwangblog

几种蚁群算法介绍

最早的蚁群算法,其在小规模TSP中性能尚可,再大规模TSP问题中性能下降,容易停滞。其解决旅行商问题(TSP)过程大致如下:

3063
来自专栏破晓之歌

推荐算法理论与实践(差代码) 原

之前的方法是基于用户已经看过一些电影,买过一些商品并且进行了评分,因此具备该用户信息,以便推荐

1603
来自专栏机器之心

教程 | 使用Gym和CNN构建多智能体自动驾驶马里奥赛车

5316

扫码关注云+社区

领取腾讯云代金券