首页 诗词 字典 板报 句子 名言 友答 励志 学校 网站地图
当前位置: 首页 > 教程频道 > 其他教程 > 互联网 >

使用Nginx+Lua进行断点下传的demo

2012-09-04 
使用Nginx+Lua进行断点上传的demo??? 公司有个业务需要优化,场景是手机客户端上传小文件到服务端,需要支持

使用Nginx+Lua进行断点上传的demo

??? 公司有个业务需要优化,场景是手机客户端上传小文件到服务端,需要支持断点上传。现在直接用tomcat直接面对客户端进行网络IO,现在准备把网络IO这块剥离出来,彻底交给Nginx+Lua来处理。理由有如下几点:
??? 1、应用服务器还是乖乖的待在后端做业务就好,底层的网络IO跟具体业务无关,这样使得项目的维护更方便,看起来更清晰。
??? 2、对于底层IO操作,不是java的强项,特别是手机用户网速慢的场景,非WIFI用户网速不快,传输时间长,且数据量是间歇性的,时有时无,这种场景使用Nginx的epoll模型最合适不过了。
??? 3、可以使用Nginx做负载均衡进行扩展。

??? 下面写一个小demo来让Nginx+Lua进行网络IO,流程如下:
??? 客户端POST一行数据给Nginx,地址为:http://192.168.112.64:38080/upload,Lua脚本读取数据,如果读取超时,则把当前已读取到的数据POST到后端tomcat,地址为:http://192.168.112.64/GoSmsMarService/Test;如果读取正常,也把读取到的数据POST到后端tomcat。可以根据具体场景直接把POST数据PUSH到缓存服务器,可以提高命中率,因为大多数用户在收到文件后马上会去查看,tomcat服务器再去异步的从缓存服务器读取数据进行持久化。
??? 这里使用了nginx的扩展版本openresty,已经包含了N多第三方模块,当然包括了要使用到的Lua模块,安装过程略。

??? nginx配置文件如下,Lua代码注释挺详细了,不赘述:

?
??? 下面写一个测试客户端测试一下读超时的情况,客户端发送post请求到Nginx,并把响应打印出来。post数据是不完整的一行,所以脚本1秒过后就会读超时,代码如下:

?

??? 返回结果如下图所示,返回的字节数正好是9个。

?


使用Nginx+Lua进行断点下传的demo

?

??? 再看下文件系统的数据,如下图所示:


使用Nginx+Lua进行断点下传的demo

?

??? 把byte[] data = "post data".getBytes();改成byte[] data = "post data complete\r\n".getBytes();

加上换行符就不会出现读超时了,再运行一下,返回的字节发生变化,结果如下图所示:
?
使用Nginx+Lua进行断点下传的demo

??? 简单的demo先告一段落,之后会找台好机器测测性能,敬请关注。

热点排行