node.js的request模块

request模块让http请求变的更加简单。最简单的一个示例:

1: var request = require('request');

       2:  

       3: request('http://www.google.com', function (error, response, body) {

       4:   if (!error && response.statusCode == 200) {

       5:     console.log(body);

       6:   }

       7: })

安装:

npm install request

可以用request的pipe方法很方便的获取图片的文件流

1: var request = require('request'),

       2:     fs = require('fs');

       3:  

       4: request('https://www.google.com.hk/images/srpr/logo3w.png').pipe(fs.createWriteStream('doodle.png'));

request也支持OAuth的签名请求

更多使用方法和说明可点击这里继续阅读:https://github.com/mikeal/request/

这里写了一个很简单的示例,用来抓取去哪儿网的酒店查询数据(获取酒店某一时间段内各房型的价格排名):

1: var request = require('request'),

       2:     fs = require('fs');

       3:  

       4:  

       5: var reqUrl = 'http://hotel.qunar.com/price/detail.jsp?fromDate=2012-08-18&toDate=2012-08-19&cityurl=shanghai_city&HotelSEQ=shanghai_city_2856&cn=5';

       6:  

       7: request({uri:reqUrl}, function(err, response, body) {

       8:     

       9:     //console.log(response.statusCode);

      10:     //console.log(response);

      11:     

      12:     //如果数据量比较大,就需要对返回的数据根据日期、酒店ID进行存储,如果获取数据进行对比的时候直接读文件

      13:     var filePath = __dirname + '/data/data.js';

      14:     

      15:     if (fs.exists(filePath)) {

      16:         fs.unlinkSync(filePath);

      17:  

      18:         console.log('Del file ' + filePath);

      19:     }

      20:     

      21:     fs.writeFile(filePath, body, 'utf8', function(err) {

      22:         if (err) {

      23:             throw err;

      24:         }

      25:  

      26:         console.log('Save ' + filePath + ' ok~');

      27:     });

      28:     

      29:     console.log('Fetch ' + reqUrl + ' ok~');

      30: });

这个例子源于一个做酒店业务的朋友,想知道自己在网站上提供给客户的价格的竞争力:

1、如果提供的价格过低,自己赚到的钱就会少了,所以如果自己价格是最低了,就需要看第二低是多少,然后决定是否调整;

2、如果提供的价格过高,那么被搜索出来的排名结果就比较靠后,没什么客户来预订酒店,业务就没有了

因为做的酒店预订业务很多,比如超过2千家以上,如果一个一个依赖人工去查询排名就比较被动,而且很难再做大,所以他的这个需求我分析了一下是可行的,而且可以做成一个很好的实时预警系统(当然数据5~10分钟会自动在页面刷新一次)。这样才能保障利润最大化,提高销售、客户部门的工作效率,加快酒店的合作数量和公司的人员扩张:

1、不亏本,亏本的买卖不做;

2、如果发现提供的价格过低或是过高,需要支持调用平台的api接口,直接修改价格;

3、有自动生成分析报表功能,分析竞争对手在价格调整策略上的变化情况;

本文参与腾讯云自媒体分享计划,欢迎正在阅读的你也加入,一起分享。

发表于

我来说两句

0 条评论
登录 后参与评论

相关文章

来自专栏哲学驱动设计

代码重构之路的艰辛

  我承认,这个标题很沉重。我有幸使用了一个开源的项目作为小范围内的二次开发应用。这个项目其实是挺大的,开源代码仅是其中一部分,在二次开发中我对源代码作了一些改...

1738
来自专栏数据派THU

【数据蒋堂】功夫都在报表外--漫谈报表性能优化

来源:润乾软件 作者:蒋步星 编辑:刘晴敏 本文字数为2219字,建议阅读6分钟 本文由蒋步星讲述了报表性能优化的问题。 应用系统中的报表,作为面向业务用户的窗...

3069
来自专栏数据和云

嘉年华专访 | 我有故事,你有酒吗?

潘娟,京东金融高级DBA,主要负责京东金融生产数据库运维及数据库平台、中间件开发工作。多次参与京东金融6.18、11.11大促活动的护航工作。曾负责京东金融数据...

1053
来自专栏云计算

爬了知乎60W个网页,发现了一些很有趣的东西

我们先讲讲爬虫,这10w个网页我没有写代码去实现抓取,当时在上班,不想花太多时间去抓取这些内容(flag)。所以就采用Chrome浏览器的插件Web Scrap...

71836
来自专栏养码场

记一次大厂面试,成功拿到offer!

若大家看到这类干货文或者觉得很不错的技术文,可后台或者留言区留言,场主会优选,将好文分享给更多的技术人!

1033
来自专栏Java架构

Java程序员从京东、阿里、携程面试回来,已成功拿到京东offer

2255
来自专栏玉树芝兰

如何高效使用外脑?

我们总有一种错觉,认为人类很聪明、很擅长记忆东西。认知科学家没有你这么乐观。他们提出人脑工作记忆容量很小,只有7±2个组块而已。

813
来自专栏牛客网

京东面经(还有一点点小感想)

一个不成熟男子的标志是他愿意为某种事业英勇地死去,一个成熟男子的标志是他愿意为某种事业卑贱地活着。——J·D·塞林格《麦田里的守望者》

771
来自专栏互联网杂技

好的界面设计

1.尽量使用单列而不是多列布局 单列布局能够让对全局有更好的掌控。同时用户也可以一目了然内容。而多列而已则会有分散用户注意力的风险使你的主旨无法很好表达。最好...

3556
来自专栏效率达人

推荐6款好用却不为人知的效率软件!

如今科技越来越发达,越来越多的日常辅助软件工具被人们用于办公。软件工具只是为了表达我们诉求的一种方式,所以在不同的工作环境或个人习惯的情况下,每个人使用的方式也...

982

扫码关注云+社区