一、mBlog介绍1.1 mBlog简介mBlog，全称micro blog.基于java+mysql.支持自部署的前后端分离的微博,可单用户使用,也可以支持多用户。...,删除无用标签等)支持上传图片(目前支持本地文件存储和七牛云,后续继续添加阿里云/腾讯云等)支持开发者使用api token响应式设计,支持pc和手机,支持夜间模式支持RSS支持markdown语法支持...四、本地环境检查4.1 检查Docker服务状态检查Docker服务是否正常运行，确保Docker正常运行。...docker logs mblog七、访问mBlog微博系统7.1 访问mBlog首页访问地址：http://192.168.3.166:8633/#/，将IP替换为自己服务器IP地址。...7.3 发表微博直接在编辑框，编辑微博内容，发表即可。7.4 开启评论在设置中，开启评论。测试在发表的微博下发表评论，可以正常评论。
前言 本文将手把手教你如何写出迷你版微博的一行行代码，迷你版微博包含以下功能： Feed 流：关注动态、所有动态 发送图文动态 搜索用户 关注系统 点赞动态 个人主页 使用到的云开发能力： 云数据库 云存储...由于社交平台一般不会限制用户的昵称，所以如果每条迷你微博都存储昵称，那将来每次用户修改一次昵称，就要遍历数据库把所有迷你微博项都改一遍，相当耗费时间，所以我们不如存储一个 userId，并另外把 id...中的筛选条件），如果是说明该用户是新用户，继续 5 提示新用户录入中，同时调用 db.collection().add() 来添加用户信息，最后通过回调判断是否录入成功，并提示用户 不知不觉我们就使用了云开发中的...3.4 addPoster 与 云存储 发送新的迷你微博，需要一个编辑新迷你微博的界面，路径我定为 pages/circle/add-poster/add-poster： <view class="app-poster-container...目前<em>云</em>函数的性能不太稳定。 7. 结语 那么关于迷你版<em>微</em><em>博</em>开发实战介绍就到此为止了，更多资料可以直接下载源码查看哦。
图床是什么 图床一般是指储存图片的服务器，有国内和国外之分。 国外的图床由于有空间距离等因素决定访问速度很慢影响图片显示速度。 国内也分为单线空间、多线空间和cdn加速三种。...参见: {% post_link 使用sm-ms图床-为GP节省空间 图床是什么 %} iPic是什么 有了图床神器 iPic，不论屏幕截图、还是复制图片，都可以自动上传、保存 Markdown 格式的链接...使用 Hexo | Heroku 或 WordPress 写博客、在公众号发文章、在知乎讨论、在豆瓣灌水、在论坛发帖、跨境做外贸电商 … iPic 带给你从未有过的插图体验。...更多介绍：https://toolinbox.net/iPic/ 使用 使用非常简单,打开后只需要把图片拖拽到菜单栏图标即可上传. tva2.sinaimg.cn/large/006tKfTcgy1fewqw208xmg30j60aske8....gif) 软件默认使用的是 微博图床,如有其他需要则需要升级专业版.¥68/年.其实免费版就已足够.
工作中需要微博的商业API，记录一下 不了解的TX先去看说说明 http://open.weibo.com/wiki/商业数据API 商业数据API：包括数据分析、舆情监测、获取全量粉丝三大特性，同时还有实时数据推送...一个是订阅微博，粉丝登上数据用的，另一个是标准API，可以使用搜索等高级接口！...价格 套餐 搜索、订阅返回条数 使用期限 套餐使用费 套餐外使用费 A 200万条 1月 6,000元 3元/千条 B 2000万条 1年 60,000元 2.5元/千条 C 1亿条 1年 250,000...从subscribe/update_subscribe这个接口的示例来看，订阅有以下特点： 订阅规则即刻生效 规则可以添加，修改 规则可以随时查询 每次修改量很有限（用户：50个；关键词：20个） 使用订阅...echo "订阅用户成功"; } 获取订阅信息 可以访问网址： http://open.weibo.com/apps/yourappid/payservice/subscribe 也可以使用
其中也包括一些我挺喜欢的微博博主，但是微博这东西，本身肯定不会做RSS输出这种吃力不讨好的东西了，而且许多获取微博的接口都需要先登录，DIYgod 基于微博秀组件的接口做了个 转换工具，但不支持全文查看和图片...后来发现了“微博看看”这个网站，但我实在是受不了它奇奇怪怪的排版，所以我写了个PHP写了个优化排版的程序，效果勉强能接受吧。...偶然发现微博的手机版好像不用登录也能看到博主的微博主页列表，但我没太认真去注意。前段时间正好看到这篇文章，正好也提到了这一点。...于是我花了一点儿时间，分析了下微博手机版的请求，参考了 DIYgod 的部分代码，写了个基于 Node.js 的版本，优化了许多细节的问题，比如查看长微博，图片，表情等等，这里就不再赘述了～ 使用和搭建方法参考项目的
国庆假期最后一天，当红流量小生鹿晗于正午 12 点，在微博公布恋情。 微博一经发布后，瞬间刷爆朋友圈、各大网站头条，还导致了微博一时间瘫痪。微博客服也很无奈表示：具体怎么造成的，大家心里也都有数。...然整个事件当中，除了无数粉碎的少女心，最无辜躺枪还如此敬业的小哥哥，非这位微博搜索工程师丁振凯莫属啦，结婚当日，遇鹿晗公布恋情，不得不从酒席上离开处理微博异常后继续婚礼，心疼小哥哥三秒钟.........回顾一下，究竟是多大的流量使得曾豪言“微博服务器稳定，能同时应付三对劈腿的”壮志秒破功，具体数据如下图所示： 按照微博明星势力榜各个榜单计分方式：满分100分，由阅读数、互动数、社会影响力、爱慕值四项组成...由上可以看出，鹿晗所发微博的每一项到达到了峰值，那么在如此高流量的情况之下，作为开发者是否有好的方法来快速提高系统性能呢？ 如何快速提高系统性能？ 请看下一篇文章。 JAVA架构
由于业务需要，研究了一下腾讯微博等登陆，下面分享一些经验给大家： 标题写的是腾讯微博的登陆，其实也可以隐身到腾讯旗下多个产品的登陆，比如QQ空间，webQQ等，想到这儿大伙是不是很激动呢？...使用某些语言自带的web工具也是可以的！...，实现第一次认证 服务器返回登陆成功信息，其中包含最终URL 第二次认证，获取腾讯微博的cookie 第二步 伪造登录过程 获取验证码 根据验证码计算出加密后的密码以及其他信息，发送GET请求至认证服务器...Encryption.getEncryption($("p").value, pt.plogin.saltUin, d.verifycode); d.pt_rsa = 0 } } 加密方法大致如下： 判断是否...使用md5加密密码，并输出其二进制值 b. 解密验证码中的类似\x01等数字，再与第一步拼接再一次加密，输出输出32位的16进制 c. 再与验证码中类似!
表情包是大家聊天的时候的必备，之前在知乎上爬取了一些表情包，但是已经用的久了该换新的了，所以我们再通过爬虫技术去微博爬一波表情包吧。...本来这个爬虫是想作为讲python异步爬虫的一个例子的，昨天代码写完测试了一下，结果是我微博账号和ip都直接被封了，然后我去搜了一下别人写的异步爬虫教程，测试用的都是些没啥反爬措施的小网站。...于是今天改了下代码，就先整个普普通通的微博小爬虫算了。鉴于之前IP被封，所以这次在在访问微博的时候我加上了代理。关于选择代理也是让人很烦恼的事，网上的代理太多了，靠谱的太少。...这里给有代理烦恼的同学推荐亿牛云代理，经过一番测试对比选的最靠谱的代理商。具体的爬虫代码就不一一展示了，这里重点跟大家分享下在使动态转发类型的代理示例。...，到此这篇关于Python模拟登录微博并爬取表情包的文章就介绍到这了，大家有哪些意见可以发出来一起交流交流。
抓包分析 首先打开charles，记录从打开浏览器到新浪微博登陆成功的全部http请求 打开新浪微博，等待页面加载完成后，输入账号密码点击登陆，charles停止抓包，关闭浏览器。...理论上我们只需要能完整的提交这个表单就能实现新浪微博的登陆。但是如果进行试验的话，会发现将该表单完整复制之后使用requests进行post提交是无法登陆的，所以可以断定其中某些字段是通过动态获取。...由于新浪微博的首页内容太多太杂 我们将上文中拿到的登陆post请求https://login.sina.com.cn/sso/login.php?...sinaSSOEncoder.base64.encode(urlencode(username));可以看出来，用户名经过了url编码后再进行了base64转码，从键值对可以看出来su提交的就是转码后的账号 使用...，&等内容使用requests里面get的params=传入def get_json_data(self, su_value): params = { "entry": "weibo
前言 微博大家都很熟悉了，时不时就谁谁上了热搜，底下评论什么都有，我们想获得评论信息做个简单的分析，可以用爬虫爬取，但花费的时间可能有点多，还会面临反爬，微博给我们开了 api 接口，我们可以调用方便的获取数据...带来了不少便利，小编带大家来爬取评论内容 api 配置 https://open.weibo.com/ 打开，注册一个账号，按照下列序号新建应用，完善基本信息 点击【我的应用】，完善基本信息 完善后的样子 点击【微连接...文档查看 我们点击【文档】，找到评论接口，我们选择【获取某条微博的评论】 ?...爬取 打开一条微博，找到它的 id，一般就是 url 后面那串数字 ? 接下来写爬取逻辑，其中画线的是接入方法，id 是刚刚的 id，count 设置一页获得数量，默认50 ?...生成词云 ? ? final 听说点“在看”的人都变得更好看咯~ -END-
本次LiveVideoStackCon 2021 音视频技术大会 北京站邀请到了新浪微博视频平台架构师——黄阳全，他将为我们介绍微博视频处理系统的架构演进与云原生之路上的探索，为什么选择自建，以及如何实现基于原有基础服务的...为尝试云原生架构模式的开发者提供参考。 文 | 黄阳全 整理 | LiveVideoStack 大家好，我是来自微博视频平台的黄阳全，今天分享的主题是微博视频处理系统云原生之路。...我在2017年加入微博研发中心，负责微博视频基础组件的开发与维护，多次参与了微博视频架构升级，主导了微博视频中台的建设。目前正在建设基于云原生架构的微博视频处理系统。...本次分享主要分为4部分： 1.背景介绍：主要介绍微博视频，微博视频处理系统，微博视频处理系统所包含子模块，以及它的特点； 2.原视频处理系统架构：针对微博视频处理系统所具有的特点，我们设计出基本满足需求的原架构...1、云厂商：由于只能覆盖公有云的场景，微博场景下暂时不考虑； 2、开源FaaS框架：根据对常用FaaS框架进行调研的结构显示，在场景、语言以及适配上有一定的局限性，现有系统迁移起来难度比较大，而且有些框架还不够成熟
这是我用大V冯大辉老师最近5000多条微博内容做的词云，大家可以围观一下。 ?...之前也写了一篇用python 来爬取朋友的QQ说说，大家也可以围观一下 Python爬虫：动态爬取QQ说说并生成词云，分析朋友状况 好了，开始进入正题： #coding:utf-8 """ 爬取冯大辉老师的微博...import sys reload(sys) #这里需要指定字符编码 sys.setdefaultencoding( "utf-8" ) def get_content(f_name): #你的微博帐号...6]/a/span').click() # 这里因为登录，需要有一个延时，不能直接切换到新网页去 time.sleep(3) # 登录成功后，再用浏览器地址定向到大辉老师的微博列表页...__main__': f_name = 'ddddd' get_content(f_name) wcp.create_word_cloud(f_name) 特别注意一下，生成词云的代码在
包含话题，评论，用户等的 微博爬虫（点击此处蓝字进入系列爬虫合集页，可订阅更新）已经更新两年有余了，2021 新版微博爬虫也已经更新一月有余，并新加了转发这个 Feature，在此期间收到不少使用咨询和...话题爬虫 首先是微博话题爬虫的更新，github 上的 2020 版代码已经停止更新了，所以就有了 2021 新版微博话题爬虫发布；今天发布的新加了微博内容去重及去掉非相关微博（微博搜索可能有广告嵌入）...、到时自动停止（这应该是个 bug，第一次发布的版本的不会停止），同时在配置文件中，新加了一个字段 only_origin ，用以控制是否只抓取原创微博，默认是 false，改为 true 即是只抓取原创微博...微博评论继续更新，上一次更新发布了 Mac 版本，这里强调下， Win 系统也能使用这个 Mac 版本。...用户爬虫 最后是用户爬虫，高兴的是，依然能使用 20 年版本 cn 站的，就不多说了。一个爬取用户所有微博的爬虫，还能断网续爬那种。 ps，打个小广告，小店开业，如有打扰，请无视。
，向下连接云计算的海量能力，助力企业垂直上云。...（子账号数量不设限）；也支持应用的分模块开发，模块的隔离 微信生态能力：多环节耦合微信的能力，提供微信的开发能力（支付、交易），并且和视频号、搜一搜接入；接入企业微信控制台；消息提醒、应用发布等 多维应用生态...：帮助每一个轮子发挥作用；提供垂直行业模板； 云原生一体化：以云开发作为技术支撑；提供高性能、高可用； 快速上手数据源 创建&编辑 添加字段 枚举类型，前面是显示的值，后面是存储的值 自定义方法...添加的新方法可以用云函数来编写 数据源有两种状态 未发布：在CMS系统以体验数据形式存在 已发布：在CMS系统以正式数据形式存在 编辑器使用 组件使用与配置 样式调整 事件 创建数据源事件...数据 全局变量可以在全部页面引用 参数变量：页面上传递使用 普通变量：不能修改的 模型变量：连接数据源的一种方式 添加名字为『CESHI』的『模型变量』 查看效果 遍历 创建普通容器 在容器里创建一个文本组件
现在开放平台非常流行，例如微信开放平台、微博开放平台等，开放平台都涉及用户授权问题，OAuth2就是目前的主流授权解决方案 OAuth2是什么 OAuth（Open Authorization，开放授权...第三方无需知道用户的账号及密码，就可获取到用户的授权信息 OAuth在"客户端"与"服务提供商"之间，设置了一个授权层，"客户端"不能直接登录"服务提供商"，只能登录授权层，以此将用户与客户端区分开 来，"客户端"登录授权层是使用令牌...（1）用户在第三方应用上点击登录，应用向认证服务器发送请求，说有用户希望进行授权操作，同时说明自己是谁、用户授权完成后的回调url （2）认证服务器展示给用户自己的授权界面 （3）用户进行授权操作，...，并且用户也已经授权我了，来换取访问用户资源的权限 （5）认证服务器对请求信息进行验证，如果没问题，就生成访问资源服务器的令牌access_token，交给第三方应用 （6）第三方应用使用access_token...向资源服务器请求资源 （7）资源服务器验证access_token成功后返回响应资源
他现在正在创业，公司叫无码科技，他有一个公众号叫小道消息，新榜给的活跃粉丝是30多万数据，他的微博有180万粉，这说明冯老师在科技界还是很有影响力的。...这是我用冯老师最近5000多条微博内容做的词云，大家可以围观一下。 ?...之前也写了一篇用python 来爬取朋友的QQ说说，大家也可以围观一下 Python爬虫：动态爬取QQ说说并生成词云，分析朋友状况 好了，开始进入正题： #coding:utf-8 """ 爬取冯大辉老师的微博...import sys reload(sys) #这里需要指定字符编码 sys.setdefaultencoding( "utf-8" ) def get_content(f_name): #你的微博帐号...6]/a/span').click() # 这里因为登录，需要有一个延时，不能直接切换到新网页去 time.sleep(3) # 登录成功后，再用浏览器地址定向到大辉老师的微博列表页
以前可以直接用的很多特性，如果使用Express 3.x就得安装“插件”来支持了。 废话不多说了，分享一下使用Express3.x来实现书中微博系统的例子。...package.json (使用*默认会获取最新的) ?...flash了，你需要先使用npm install connect-flash。...res.render时需要显式传入模块可能要用到的变量和数据，在使用partial时，也需要指定。...6、在使用mongodb来存储sessions时，你需要先安装MongoDB。如果安装MongoDB？，请参考这里>> 最后来张实际运行的效果图： ?
用新浪微博API积累了微博广场的1.4万条数据，我选择了21个字段输出为TXT文件，想用Python稍微处理一下，统计一下这1.4万条微博里面表情使用情况，统计结构在最后。...1、调用新浪JAVA API下载微博广场数据 步骤思路： 初始化API的Weibo类，设置Token后，设置下载间隔，然后重复调用getPublicTimeline()函数就可以了，下面是主要类的代码：...要取得数据就是微博内容，先练一下手玩玩。 3、Python处理数据 目标：查看微博用户表情使用情况，暂时只分性别，如果积累了合适的数据后可以分析各个时间段人们爱用哪种表情。...步骤： $ 读取TXT文件，递归处理每一行 $ 单独提取出微博字段，正则提取表情字段，同时把性别提取出来，放到一个dict里面，dict的格式是：表情/女性使用频率/男性使用频率，递归处理，累积频率 $
数学建模已结束，刚开始的目标就是不熬夜，结果还是熬夜了（QAQ），缓了一天就来写简书了，感觉很久没爬虫了，今天就爬下移动端的微博好友圈信息。...format=cards' get_info(url,1) 代码分析 提交cookie模拟登陆微博 好友圈的信息也是异步加载，如图为第一页的url ?...这样就可以构造多页url，爬取数据啦 词云 最后，jieba分词做了一个词云，除了二哈，感觉全是群主的，被刷屏了。 ?
领取专属 10元无门槛券
手把手带您无忧上云
云服务器
ICP备案
对象存储
实时音视频
即时通信 IM
