专栏首页华章科技【浅观】天文中的那些大数据

【浅观】天文中的那些大数据

大数据是领域相关的,如今大数据在各个领域都有着卓越的表现。比如,苏州政府、中石油等都使用大数据魔镜——免费的大数据可视化分析工具对自己领域的大数据进行了分析与挖掘。政府、企业与医疗等机构的数据涉及到安全、利益与隐私问题,要开放与共享是有难度的。但是如果研究大数据的处理技术,而不是去挖掘具有商业价值的大数据,不妨换个思路,用不涉及安全、利益与隐私问题的大数据作为数据源。

被誉为“大数据时代的预言家”维克托•迈尔•舍恩伯格的国外大数据系统研究的先河之作《大数据时代:生活、工作与思维的大变革》书里“大数据先锋”一节中写到:“天文学,信息爆炸的起源“。

只有考虑到社会各个方面的变化趋势,我们才能真正意识到信息爆炸已经到来。我们的数字世界一直在扩张。以天文学为例,2000年斯隆数字巡天(SloanDigitalSkySurvey)项目启动的时候,位于新墨西哥州的望远镜在短短几周内收集到的数据,已经比天文学历史上总共收集的数据还要多。到了2010年,信息档案已经高达1.4×242字节。不过,预计2016年在智利投入使用的大型视场全景巡天望远镜(LargeSynopticSurveyTelescope,LSST)能在五天之内就获得同样多的信息。天文学领域的变化在各个领域都在发生。”

从上可知,天文学是最早迎接大数据挑战的领域。随着天文观测技术的发展,天文学已经进入了一个信息丰富的大数据时代,天文数据正在以TB级甚至PB量级的速度不断增长。目前国际上已有多个国家进行了大规模的巡天项目,除SDSS(SloanDigitalSkySurvey)外,还有Pan-STARRS1(ThePanoramicSurveyTelescopeandRapidResponseSystem)、WISE(Wide-fieldInfraredSurveyExplorer)、2MASS(TwoMicronAllSkySurvey)、Gaia、UKIDSS(UKIRTInfraredDeepSkySurvey)、NVSS(TheNRAOVLASkySurvey)、FIRST(FaintImagesoftheRadioSkyatTwenty-cm)、2df(Two-degree-FieldGalaxyRedshiftSurvey)、LAMOST(TheLargeSkyAreaMulti-ObjectFiberSpectroscopicTelescope–郭守敬望远镜)等等,这些巡天项目每天都在产生着海量的天文数据。目前,业界对大数据的看法不尽相同,但大数据应具备的4V特征已达成共识,即:Volume(大量)、Velocity(高速)、Variety(多样)、Veracity(精确)或Value(价值)。天文数据具备4V特征,因此天文数据是大数据。在难以获取其他大数据时,不妨考虑根据天文学领域的需求,结合计算机科学、模式识别、系统科学等相关学科领域的理论与方法,研究与发展天文大数据的处理技术。

不同于其他具有商业价值的大数据应用领域,研究天文大数据是面向基础自然科学研究领域的应用。相信可以推动对大数据研究的的发展,在研究技术上形成百花齐放的局面。

本文分享自微信公众号 - 大数据(hzdashuju)

原文出处及转载信息见文内详细说明,如有侵权,请联系 yunjia_community@tencent.com 删除。

原始发表时间:2015-06-09

本文参与腾讯云自媒体分享计划,欢迎正在阅读的你也加入,一起分享。

我来说两句

0 条评论
登录 后参与评论

相关文章

  • 一个大数据首席科学家眼中的大数据产业2016年终总结

    大数据产业发展了两年之后,从探索阶段进入了应用阶段。数据被定义成重要的资源,正在得到企业的重视,在经营过程中发挥着重要的作用。企业看到了数据价值,从被动了解走向...

    华章科技
  • 大数据分析的光荣与陷阱——从谷歌流感趋势谈起

    本文从谷歌流感趋势2009年前后表现差异谈起,讨论了大数据分析容易面临的大数据自大、算法演化、看不见的动机导致数据生成机制变化等陷阱,以及对我国大数据产业发展的...

    华章科技
  • Intel研究院院长吴甘沙:大数据分析师的卓越之道(珍藏版)

    亲爱的各位同仁,各位同学,早上好。大数据时代数据分析师应该做什么改变?我今天的标题是大数据分析师的卓越之道。这个演讲信息量比较大,我讲的不一定对,即使对的我也不...

    华章科技
  • MIT高级讲师:从大数据到深数据

    大数据文摘
  • MIT高级讲师:从大数据到深数据

    在过去的10个月,我主持参与了麻省理工的“IDEAS中国”项目——一个由30多位中国商界领袖组成的,为期10个月的创新之旅。今年,该项目招收了中国一个主要国有银...

    CDA数据分析师
  • 【经典】你用 Python 做过什么有趣的数据挖掘项目?

    编者按:本文经授权转载自知乎回答,作者何明科系一面网络技术有限公司创始人。作者现身说法,用自己的创业历程举例说明:有钱很重要,有趣更重要。以下是正文:enjoy...

    小莹莹
  • 大数据周周看 | 小米推出智能玩具米兔机器人,英特尔收购VR公司涉足体育大数据

    数据猿导读 我国首个健康大数据运营服务平台即将落地;众安保险拟5000万元成立子公司众安科技;原航运数据咨询公司德路里中国区总经理刘倩文加盟亿海蓝……以下为您奉...

    数据猿
  • 国外资本的流入,是中国大数据产业的搅局者

    2005年以来,由于境内外利差、投资收益差以及汇率升值等原因,境外资金通过多种渠道流入境内的规模巨大,即便在严格的政策管制下,海外资金流入仍然保持了体量大、增速...

    钱塘数据
  • 大数据24小时 | 印度摇身一变成资本“新宠”,科比退休之后竟做起了大数据的买卖

    <数据猿导读> 苹果公司瞄上了“大健康”的蛋糕,宣布收购健康数据公司Gliimpse;恒大5.7亿元收购第三方支付平台集付通,互金野心昭然若揭;新加坡互联网公司...

    数据猿
  • 如何运用大数据?我们如何利用大数据?

    在互联网时代,依靠大数据是未来的发展趋势。大数据分析现在非常流行,但是我们需要知道的是,大数据的价值体现在有效而正确的分析中。只有通过正确有效的分析工具和分析方...

    数据前沿

扫码关注云+社区

领取腾讯云代金券