学习
实践
活动
工具
TVP
写文章

美国“存储Twitter”,中国也要给博文“建档”

在软件工程里面,library也有“信息库”的意思,它包含构建应用所需的一切,源代码、资源文件等等。 国家图书馆相关负责人透露: “在中国境内开展互联网业务、并在相关领域处于领先地位的企业机构,均可申请成为互联网信息战略保存基地共建主体。 2018年,这一项目再次遇到困难,Twitter信息爆炸式增长,服务器不堪重负,美国国会图书馆表示将不再收集Twitter上所有公开推文,而是保存他们认为重要的(比如特朗普的?) 不只是美国,澳大利亚、法国、瑞典和荷兰等国都在90年代启动了国家级的互联网数据收集策略,相对而言,中国“国家图书馆互联网信息战略保存项目”虽然来得较晚,却有望基于当下更加成熟的技术和更加独特的模式,实现互联网信息存储 如果“国家图书馆互联网信息战略保存项目”项目能够成功,对于很多已经和即将开展互联网信息保存的国家来说,应该会成为又一个“中国式样本”。

28730

何用Python分析大数据(以Twitter数据挖掘为例)

为什么选择Twitter数据? Twitter是一个数据金矿。不像其他的社交平台,几乎每个Twitter用户的微博都是完全开放并且是可拉取的。 入门指南 Twitter开发者账号 为了使用Twitter的API接口,需要先在Twitter应用站点上创建一个开发者账号。 注意,由于Twitter的频率限制,每次查询只能拉取一定数量的微博。 让我们来拉取Twitter账号@NyTimes的最近20条微博。 ? 如果想在Twitter世界中监控某个话题,或者甚至想看下你的商业被提到的情况,这都是相当有用的。假设现在想看下Twitter谈论Toptal的情况怎样。 如果Twitter API接口和大数据分析是你未来会感兴趣的东西,建议查看Twitter API接口,Tweepy和Twitter的频率限制指南以获取更多信息。

4.8K40
  • 广告
    关闭

    热门业务场景教学

    个人网站、项目部署、开发环境、游戏服务器、图床、渲染训练等免费搭建教程,多款云服务器20元起。

  • 您找到你想要的搜索结果了吗?
    是的
    没有找到

    何用Python分析大数据(以Twitter数据挖掘为例)

    为什么选择Twitter数据? Twitter是一个数据金矿。不像其他的社交平台,几乎每个Twitter用户的微博都是完全开放并且是可拉取的。 入门指南 Twitter开发者账号 为了使用Twitter的API接口,需要先在Twitter应用站点上创建一个开发者账号。 注意,由于Twitter的频率限制,每次查询只能拉取一定数量的微博。 让我们来拉取Twitter账号@NyTimes的最近20条微博。 ? 如果想在Twitter世界中监控某个话题,或者甚至想看下你的商业被提到的情况,这都是相当有用的。假设现在想看下Twitter谈论Toptal的情况怎样。 如果Twitter API接口和大数据分析是你未来会感兴趣的东西,建议查看Twitter API接口,Tweepy和Twitter的频率限制指南以获取更多信息。

    1.8K30

    小技巧 | 如何用python把时间戳(1511544070)转换成常规时间格式?

    14320

    从美国到中国,他用大数据拼写中国的Fintech | 数据科学50人·呼延

    ▍崛起的中国互联网金融力量 2017年11月11日,一天内,中国消费者在天猫平台上,花了超过1682亿人民币。 鼎盛的消费浪潮和升级的消费观念,也唤醒了中国的信贷市场,互联网金融产业逐渐走到了这股消费漩涡的中心。 2012年,同样毕业于清华大学,也同样在Capital One工作过的赵萌找到呼延生,希望跟他一起在中国银联旗下尝试创办一家以数据科学为基础的金融科技服务公司,也就是后来的银联智策。 这样的数据和市场规模,让呼延生看到了数据科学在中国金融市场上的巨大潜力。 两人一拍即合,希望将海外的金融科技经验带回国内发展。 2013年,余额宝的横空出世引爆了中国的互联网金融行业,这也加速了中国银联等传统金融机构在金融科技领域的布局。 “我们始终要坚持走大数据的方向,始终做下去。”

    34300

    何用互联网思维做出中国好SaaS?

    美国的工作和生活更公私分明,Slack出现之前,他们都是用邮件往来沟通工作,甚至有时候往来数百封邮件,而他们在Twitter和Facebook分享生活。 Slack的出现为他们提供了社交化的工作沟通方式,而中国完全不一样,国内是一个公私不分的沟通环境,微信和QQ基本能完成所有的工作沟通,所以工作沟通在中国不是痛点,仅仅提供这种功能的SaaS软件都不是付费软件 中国的社交开放性不如美国,由于美国社交环境的开放性,给Hubspot、Freshdesk这样的SaaS企业带来了机会,Freshdesk可以接Twitter和Facebook,也可以接客服,拥有完善的服务体系 ,但中国的社交平台开放性没这么好。 现在中国进入了中国创造时代,大量的知识型企业开始出现,管理者不再那么重要,下面的人才更重要,人才培养和给员工赋能更能代表了一个企业的竞争力。

    48440

    谷歌重返中国TensorFlow将成利器,谷歌董事长评中美AI差距

    本文列举了谷歌最近一段时间以来在重返中国上的一些努力:投资、人才招募等等,也分析了谷歌在中国面临的竞争对手。 谷歌对中国市场的兴趣从来没有减弱 Google显然有兴趣在中国重新开展业务。 2010年,由于各种原因,谷歌从中国大陆撤出搜索引擎等业务。 Hassabis 参观访问了多家中国企业,讨论如何在商业层面和科研层面利用 AI。《金融时报》报道称,从 2010 年退出中国搜索引擎市场以来,如今谷歌与中国政府的关系正在改善中。 今年7月21日,中国科技部副部长李萌在政策例行吹风会上称,中国将进一步加强与世界各国政府、企业和研究机构的交流合作,“特别是欢迎谷歌、亚马逊等人工智能领先企业在中国设立研发机构。 投资、人才以及竞争对手 近来谷歌在中国的几个大城市发布了AI工作机会。 公司也开始派更多员工来中国

    57880

    单片机课堂思考题-如何用手机控制单片机IO口-点亮一个LED

    很难了,思考-检索-推荐,在互联网算法的投喂下,大部分已经丧失了独立思考的能力了。

    19630

    干货 | 中国香港科技大学施行健:深度学习如何用于短临降雨预报

    施行健,中国香港科技大学四年级博士,师从杨瓞仁教授。现于Amazon AWS Deep Learning组实习,岗位为应用科学家。本科就读于上海交通大学,导师为李武军教授和王士林教授。 中国香港天文台就是基于光流矢量做的短临降预测。 MovingMNIST可视化效果图 关于新基准HKO-7 这个数据是中国香港天文台提供的2009年到2015年降雨雷达图数据,简单的来说我们用2009年到2014年数据作为训练和确认, 我们正在尝试把这套算法融入到中国香港天文台的系统里面。

    1.6K70

    被时代呼唤的数学人蒋步星:我如何用数学做中国自己的数据库?

    在这场中国的自主创新征战中,数学人又能发挥怎样的作用呢? 对于这个话题,或许没有人比蒋步星更有发言权。 近日,蒋步星老师也撰长文,分享了自己如何用数学,做中国人自己的数据库系统,从中可一窥一个“数学人”的家国情怀和实业精神。 以下为全文: ? 题目《莫非我就是被时代呼唤的数学人?》

    84340

    理智与情感: 描述社交媒体用户对 COVID-19使用有争议的术语(CS SI)

    随着2019年新型冠状病毒在世界范围内的发展,尽管官方宣布该病为 COVID-19,一个有争议的术语——“中国病毒”仍然被许多人使用。 随着这种流行病变得越来越严重,越来越多的人开始在 Twitter 等社交媒体平台上谈论它。 当他们提到 COVID-19时,主要有两种方式: 使用有争议的术语中国病毒”或“武汉病毒” ,或使用无争议的术语“冠状病毒”。 在这项研究中,我们试图描述使用有争议术语的 Twitter 用户和使用无争议术语的用户。 我们使用 Tweepy API 检索1700万条相关的 Tweet 及其作者的信息。 我们发现这两组 Twitter 用户的人口统计特征,用户层面的特征,比如关注者数量,政治关注状态,以及他们的地理位置,存在显著差异。

    32320

    分析 | 中美意见领袖对中美贸易战的观点态度,大数据告诉你

    中国社交媒体意见领袖的核心关注哪些领域?在中美贸易战中,谁是社交媒体意见领袖拥有重大的影响力? 随着中美贸易战的逐步升级,我们基于872个Twitter账号和845个微博账号对美国政界意见领袖和中国相关领域社交媒体意见领袖进行大数据分析,深入挖掘了其在这一事件的观点和态度。 但在Twitter上,美国政界更集中关注美国国内贸易经济,对中国的关注程度虽然排名第二,但占比不足3%;而微博中中国社交媒体意见领袖对美国的关注度则达到近20%。其次,中美两国较为关注与邻国的贸易。 而Twitter对贸易最关注的话题是中国、农业、经济、更好的交易以及北美贸易协定等话题。对于中美贸易战,美国政界意见领袖群体更关注与中国的贸易、农业、食物、钢铁、劳动力、逆差等领域。 ? 图:民主党、共和党Twitter平均转评赞对比 国内社交媒体意见领袖在对美贸易讨论中,主要关注市场壁垒、关税问题、农业等话题,并普遍对美国发起贸易战的深层意图霸权政治等进行讨论。

    811110

    地球一小时进入中国十个年头,互联网巨头如何用科技做环保?

    今天是“地球一小时”活动进入中国的第十个年头。然而,今年的形式因为互联网巨头的加入,变得有些不一样。 ? 如何克服环保的吉登斯悖论? 记得“地球一小时”活动刚进入中国时,我还在读大学,第一年同学们都觉得新鲜,兴致勃勃地参与,然而到了第二年,大家就没什么兴致了。 对节能减排有益,有助于推动环境保护和社会可持续发展的绿色生活行为方式,简而言之,今年的“地球一小时”,不只是希望大家通过关灯来提醒自己不忘环保,还提供了长期的行动指南,而百度的加入,对于“地球一小时”活动在中国的落地效果将起到很大的促进作用 百度作为中国最大的搜索引擎入口,对于“地球一小时”和“60+生活方式”最大的价值,是可以形成很好的传播,每天有700亿访问量的百度首页Doodle已更换为活动主题,用户进入后就能看到王俊凯、彭于晏、李冰冰和王石等明星名人环保大使关于环保的宣传 以一次性筷子为例,中国市场每年消耗一次性木筷子450亿双,相应的,900万棵生长30年的杨树因此被砍伐。

    50760

    市值反超Twitter,深度复盘微博如何青出于蓝而胜于蓝?

    在我看来这是中国互联网行业的标志性事件:中国互联网公司依托中国大市场优势,借助本土化创新超越海外巨头,微博是最新一个,但不会是最后一个。 ? Twitter面世之后在全世界范围内出现了许多的跟随者,2009年这股风刮到中国,新浪微博作为新浪内部孵化项目与饭否、叽歪、嘀咕等创业项目一起面世,之后搜狐、腾讯和网易等巨头纷纷跟进,竞相效仿Twitter 在另一个衡量互联网公司价值的关键指标即活跃用户上,立足中国市场的微博与谋求全球化的Twitter差距正大幅缩小。 内容产业已是中国互联网全新的增长点,某些领域直播甚至更加先进,作为最大的移动互联网市场,中国有着最多的注意力,而传统文化内容产业落后则是互联网的先天机遇,微博享受到了中国的市场红利:用户已是红海,但注意力还尚待挖掘 所以,微博反超Twitter,即是微博的胜利,也是中国内容产业价值的显性化,相信这一领域还会上演更多“反超”事件。

    43640

    马斯克称Twitter可能破产;Meta暴裁1.1 万人,小扎承认犯了错;GitHub年度报告:印度开发者增速超中国 | Q资讯

    整理 | Tina 马斯克称 Twitter 有可能破产;扎克伯格宣布 Meta 裁员,裁员人数超过 Twitter;小冰公司融资 10 亿元人民币,投后估值 20 亿美元;周鸿祎“开炮”:特斯拉不安全 科技企业 马斯克称 Twitter 有可能破产 Twitter“新主人”马斯克在裁掉了该公司大约一半的员工后,首次向 Twitter 员工发表讲话时表示,公司有可能破产。 据马斯克称,Twitter 自 2019 年以来一直没有盈利,随着广告商大量撤资,Twitter 营收“大幅下降”。 目前主要收入是为公司和机构提供 AI 虚拟人,冬奥会数字裁判、万科数字员工。小冰公司称本轮融资主要用于加速 AI Being 小冰框架技术研发,推动数字员工普及。 张朝阳称自己是中国互联网化石,但自我感觉年轻 11 月 9 日,在 2022 世界互联网大会乌镇峰会上,张朝阳谈起中国互联网刚发展时的情景,感慨到现在都快 30 年了,笑称自己真是中国互联网的一块化石,

    6210

    Twitter的野心:我们终将弃用密码

    国外最流行的微博平台Twitter正在策划一项很大胆的项目:试图率先在Twitter上结束我们所习惯的密码时代。 和大多数科技公司一样,Twitter经典登陆方式也是一个邮箱地址加一个密码的组合。 但是他们发现在远离美国的其他发展中国家,人们更多的习惯是使用和认可他们手上的移动设备,而不是电子邮件! 这就使得当地人很难轻易的注册Twitter并享受twitter的其他优质服务,于是Twitter雄心勃勃要解决这一困难,何不抛弃密码,以某种方式信任一次手机让用户直接登录?! 思考缘由,是因为考虑到发展中国家电子邮件并不常用。同时开发这一功能还有一个好处就是解决了人们要记住多个web网站密码的痛苦。 Fabric的开发工具还包含公司的其他应用程序,Crashlytics MoPub TwitterKit。

    31950

    Twemproxy——针对MemCached与Redis的代理

    Twemproxy有何用途呢? Twemproxy早在今年初由Twitter开源,它最开始支持Memcached,最近又添加了对Redis的支持。 Twitter使用了大量的缓存服务器,每秒会发送300k的tweet;可以看看这篇介绍Real-Time Delivery Architecture At Twitter以了解更多信息。 原文: Twemproxy——针对MemCached与Redis的代理 Twemproxy, a Redis proxy from Twitter Twemproxy – Twitter 开源的 Redis

    34190

    看我如何发现Twitter任意账户发送推文漏洞并获得7560美元赏金

    在参与Twitter漏洞赏金项目的过程中,我通过一些安全测试发现了Twitter存在的重大漏洞:攻击者不需要获取他人账户权限,就能以任意账户发布推文。 我们一起来看看该漏洞细节: 简 介 Twitter Ads最早为向企业开放的广告服务平台,为了扩大自媒体广告业务,Twitter Ads于2013年5月1日向所有美国用户免费开放,用户可以通过https Загрузить медиа-файл),选择某一上传图片文件后,会显示相应的已经上传的图片: 点击该图片放大,请注意查看上图中显示的功能,将出现以下情景: 1、我们可以推送发布该多媒体文件 2、我们可以与任何用户分享该多媒体文件 就这样向Twitter上报该漏洞?再想想看!我个人感觉该漏洞可能非常严重,想想看,还记得之前可以对任何用户分享该媒体文件的情况吗? 好了,可以安心地向Twitter上报漏洞并等待漏洞赏金了!

    48190

    喜大普奔,Keras 官方中文版文档发布啦!

    AI 研习社消息,日前,Keras 之父 François Chollet 在 twitter 上发布消息,宣称 Keras 中文版本正式上线,同时,对所有做出贡献的小伙伴们,他也表示由衷的感谢。 此外,还迎来两个重大变化:一是让约束管理(constraint management)基于变量属性;二是把层和模型中已经不再使用的约束属性移除(不会影响任何用户)。 相信这次官方中文版的发布,会是 Keras 走向中国市场的一大步,期待未来看到 Keras 在中国的更多开发活动。

    474130

    Super快报第22期:最不安全的互联网公司

    具体点:通过“安全卫士”、“安全浏览器”,在用户电脑中私自卸载竞争对手的产品,私自安装自己要推广的产品,从而以最便捷的方式一举占领市场,这就是360常胜不衰的真正秘诀。 作为中国的互联网警察,无人可以管控的互联网警察,我们是信任他,还是信任他呢? 360的公关反应系统一既往地反驳,并起诉。 2、这不是中国特色:奥巴马的水军们 美国德克萨斯州共和党众议员史蒂夫·斯托克曼(Steve Stockman)周一称:人们向国会议员发布Twitter消息,以支持枪支控制立法。 他收到了16条Twitter消息,但所有信息都是相同的;如果仔细检查一下,就会发现仅有6条Twitter消息来自真人。 5、2012年中国宽带资费水平降30% 工信部部长苗圩:2012年,中国光纤覆盖家庭达9400万,年增长超50%;固定宽带用户1.75亿,平均资费下调30%。 姑且不论数字准确性。

    37870

    扫码关注腾讯云开发者

    领取腾讯云代金券