使用Go语言框架进行web开发笔记

前言

关于golang的web开发有不少框架,例如 martini, gin, revel,gorilla等。 之前玩过revel,感觉封装的太多了,作为一个小应用不需要这么复杂,而且google得到结果是revel的效率相对较差。gin的benchmark显示效率是martini的40倍,但是gin比较新所以他的的生态圈相对较少。最终选择了martini, 有很多middleware可以选择,其中就包括了websocket,并且背后用的是gorilla websocket这个包。

界面和功能

  1. 一个跳转到Oauth2登陆授权页面的链接
  2. 授权完成后,跳回服务的页面,此时获得了access_token, 就可以为所欲为了。全部的功能也都集中在这个页面,最终的界面如下图所示。

点击连接是用来打开websocket连接的。开始发送数据是开始把用户ID发给服务端,服务端调用api开始抓取图片。停止用于停止本次的抓取服务。已完成数量用于实时返回抓取的图片数量。

程序大致结构

这里把Jobs, goroutine #1, #2等作用在全局是为了在websocket断开后,下载还能继续执行。websocket goroutine是连接建立后的作用域,连接断开后这个goroutine就不存在了。Jobs, NextUrl充当队列的角色。 Done的作用仅仅是计数。这里少写了两个全局变量,Quit chan int, IsPreparing bool, 这两个变量是用来让前端控制抓取程序是否进行的。

简单理解就是一个产生任务的for循环,一个消费任务的for循环,一个用于给client返回计数的for循环。这里不得不感叹,goroutine channel的设计使得编码简单明了。

遇到的问题

由于第一次正经使用Go,还是遇到不少问题的。不过需求比较简单,所以没有接触什么深入的内容。主要集中在强类型带来的问题。

DB查询

之前写过一篇关于database/sql的文章,这次直接用了sqlx这个库,可以少写不少代码,也少犯错误。但是毕竟不如laravel那么方便,所幸需要写的sql不多,临时写几个方法就搞定。同时思考,如何实现一个eloquent的api。貌似有难度。

Json处理

强类型决定了Json的处理是个痛。之前写过一个天气预报的小程序,用的是map[string]*json.RawMessage 这种映射结构,然后一层一层解开json。当时没发现这是有问题的,因为如果用RawMessage, 字符串的引号"也会被保留,使得字符串结果前后多了引号。 这次再次google了一次,发现还是得用map[string]interface{}来映射,然后再用type assertion来一层层的解开json。这是一个痛苦的过程,想起php中的json_decode()不禁泪流满面。

Stop Goroutine

如何中断一个goroutine是一个问题,因为需要控制开始停止。谷歌一下很快就有结果。

    go func() {        for {            select {            case <-Quit:
                IsPreparingJobs = false
                return
            default:                // to do something
            }

        }
    }()

这里设置一个IsPreparingJobs是用于中断后再次开始这个循环。

Testing

Golang提供的测试工具非常方便,go test就能进行所有测试。从martini源码中复制了两个常用方法出来。

func expect(t *testing.T, a interface{}, b interface{}) {    if a != b {
        t.Errorf("Expected %v (type %v) - Got %v (type %v)", b, reflect.TypeOf(b), a, reflect.TypeOf(a))
    }
}

func refute(t *testing.T, a interface{}, b interface{}) {    if a == b {
        t.Errorf("Did not expect %v (type %v) - Got %v (type %v)", b, reflect.TypeOf(b), a, reflect.TypeOf(a))
    }
}

总结

感觉golang作为web开发工具,在数据格式处理方面,没有弱类型语言方便。这点node倒是非常好,json转object非常方便。也许配合Promise,node会比较好用吧。golang也有优势,goroutine非常好用,官方的库功能非常全,打包为二进制可执行文件使得部署异常容易,强类型语言效率比较高。

原文发布于微信公众号 - Golang语言社区(Golangweb)

原文发表时间:2016-08-27

本文参与腾讯云自媒体分享计划,欢迎正在阅读的你也加入,一起分享。

发表于

我来说两句

0 条评论
登录 后参与评论

相关文章

来自专栏电光石火

java类名包名解释

VO:值对象、视图对象 PO:持久对象 QO:查询对象 DAO:数据访问对象——同时还有DAO模式 DTO:数据传输对象——同时还有DTO模式 PO:...

4787
来自专栏游戏杂谈

Ant+JSDocTookit生成Javascript文档

需要备上下面三样东西 JSDocTookit http://code.google.com/p/jsdoc-toolkit/

1943
来自专栏PHP在线

小技巧让你的 if else 看起来更漂亮

刚看到一个提问帖: 《如果程序中出现多层嵌套的 if...else...语句,如何重构可使程序逻辑变得更为清晰易读?》,因回答篇幅比较大,单独开个帖子答一下。 ...

2886
来自专栏CDA数据分析师

Python性能分析指南

虽然你所写的每个Python程序并不总是需要严密的性能分析,但是当这样的问题出现时,如果能知道Python生态系统中的许多种工具,这样总是可以让人安心的。 分析...

2175
来自专栏Crossin的编程教室

pycharm 如何程序运行后,仍可查看变量值?

来出自知乎同名问题。 因为觉得这个问题挺实用,且确实有很多人不了解,故将自己的回答搬运到这里。 我自己开发时候也经常遇到这样的需求:程序运行后,结果不正确,想要...

5228
来自专栏架构之路

spark 2.3 导致driver OOM的一个SparkPlanGraphWrapper源码的bug

长话短说,我们部门一个同事找到我,说他的spark 2.3 structured streaming程序频繁报OOM,从来没有坚持过超过三四天的,叫帮看一下。 ...

1192
来自专栏程序你好

C# API中的模型和它们的接口设计

932
来自专栏编程

Cgroup原理解释及部署实例(3)

Cgroup设计原理分析 CGroups的源代码较为清晰,我们可以从进程的角度出发来剖析cgroups相关数据结构之间的关系。在Linux中,管理进程的数据结构...

2518
来自专栏IMWeb前端团队

【原译】javascript中的错误处理

本文作者:IMWeb ouven 原文出处:IMWeb社区 未经同意,禁止转载 【原译】javascript中的正确错误处理 A Guide to P...

2459
来自专栏葡萄城控件技术团队

Html5 FileReader 对文件进行Base64编码

以Base64进行编码的数据Url开始越来越广泛的被应用起来,原来做Base64转换要自己写一个小程序来转,其实Html5的FileReader的readAsD...

2998

扫码关注云+社区

领取腾讯云代金券