20151103
2015-11-03 16:03
309 查看
======20151118
***1
======google protobuf
Google Protocol Buffer( 简称 Protobuf) 是 Google 公司内部的混合语言数据标准,
目前已经正在使用的有超过 48,162 种报文格式定义和超过 12,183 个 .proto 文件。他们用于 RPC 系统和持续数据存储系统。
Protocol Buffers 是一种轻便高效的结构化数据存储格式,可以用于结构化数据串行化,或者说序列化。它很适合做数据存储或 RPC 数据交换格式。
可用于通讯协议、数据存储等领域的语言无关、平台无关、可扩展的序列化结构数据格式。目前提供了 C++、Java、Python 三种语言的 API。
它其实是一个可以帮你生成自定义数据结构的代码,并提供了序列化该结构的方法,并且支持多语言,跨平台等一系列优点
message Order
{
required int32 time = 1;
required int32 userid = 2;
required float price = 3;
optional string desc = 4;
}
然后生成相应的类。
http://blog.csdn.net/superbfly/article/details/17920383
Protobuf定义了一套基本数据类型。几乎都可以映射到C++\Java等语言的基础数据类型.
======20151116
***1
肌纤维相当大,长度约为1至40毫米,直径约为10至100微米。相比而言,一根头发的直径约为100微米,而体内一般细胞的直径约为10微米。
肌纤维包含许多肌原纤维,它们是肌肉蛋白质组成的圆柱体。
在纤维内部,沿T小管间的长轴伸展的是称为肌质网的膜系统,用来存储和释放激发肌肉收缩的钙离子。
神经末梢在神经冲动到达时,释放乙酰胆碱,引起肌肉纤维的收缩。
人体的600条肌肉之间的互相合作,协助你度过每一天。
毛细血管负责携带红血球流经肌肉。肌肉剧烈收缩的时候,毛细血管遭到挤压,肌肉会开始缺氧,废物开始堆积。
但在压力极大的情形下,肌肉无法作出快速的反应,疲劳感于是不断袭来。
慢肌纤维在力量与爆发力方面逊色于快肌纤维,但其拥有很好的耐力。由于其含有氧气,线粒体,肌红蛋白(肌细胞中运输氧的色素,是一种结合蛋白,
与血红蛋白的一个亚单位相似,由一条珠蛋白的多肽链和一个血红素基团组成,它与红细胞释放的氧相结合,
起贮氧作用,并将其转运至肌细胞的线粒体,在那里氧将葡萄糖氧化,生成二氧化碳和水)所以颜色较深。
鸟类主要由慢肌纤维组成,因此可以做长时间的飞行。
蛋白质是生物体内一种极重要的高分子有机物,占人体干重的54%。蛋白质主要由氨基酸组成,因氨基酸的组合排列不同而组成各种类型的蛋白质。人体中估计有10万种以上的蛋白质。
每克蛋白质在体内氧化时提供的热量是18kJ,与葡萄糖相当。用蛋白质作能源是一种浪费,是大材小用。
***2
比如1000万的标挂出去,50元起投,估计1000-10000投资人,还有投资人设置了自动投标,
所以一秒钟之内会出现上千笔交易。而SQL Server本身却无法支撑横向扩展。
EDAS体系(企业级分布式应用服务,Enterprise Distributed Application Service),这样无论有多大流量都可以通过中间件将底层资源按照需求自动配置,
而在流量过去后可以自动释放,做到真正的分布式
投资人已经从红岭赚走了21亿,代收还有25个多亿。
去年红岭开创了创投第一个双十一,1日成交额5.537亿,占全国当天网贷11.87亿的46%还要多
***3
交易创建峰值达到每秒钟14万笔,支付宝的支付峰值达到每秒钟8.59万笔。
今年双11,阿里在90分钟以内,就可以创建一个像淘宝或者天猫,或者支付宝这样量级的大型架构,去满足技术和灾备需求。
由蚂蚁花呗的支付带动了支付成功率的提升至少有2%—3%,每个百分点至少能促进1.3亿消费
这意味着蚂蚁金服的支付系统如果要支撑每天100亿笔支付已经没有大的支付障碍。
互联网和电子商务本身不制造任何产品,只是被企业利用而诞生了销售奇迹,给他们带来了希望。这是新型中国实体经济的一个崛起。
Visa最新的实验室测试数据是每秒5.6万笔,另一家全球性支付清算平台MasterCard的实验室测试数据为每秒4万笔,
在实际应用中,Visa处理的峰值为每秒1.4万笔。支付宝此次创造的纪录比Visa快大约6倍。
听过李开复老师的演讲《算法的力量》,也阅读过吴军老师的大作《数学之美》,不得不说算法是许多高效计算机程序的灵魂。
目前跟算法特别是机器学习有关的应用主要有:个性化推荐/排序、风险控制、精细化运营、行业大数据据报告等等。
我这里主要说说机器学习相关的算法,像分类用我自己用的比较多的就是:SVM/LR/最大熵/以及各种基于决策树的方法;
聚类主要是kmeans及其变体;回归的话主要是线性回归/Lasso/Rigde等,损失函数通常会自己调整;推荐的话尝试过ALS。
在我们开始开发otto.de网上商店时,我们选择了分布式垂直架构。之前的工作经验告诉我们,一体化架构(monolithic architecture)不能够满足不断增长的需求。
爆发式增长的数据、持续提高的负载和对系统的扩展,所有的这些强迫我们去重新思考网站的架构。
======20151112
***1
======github project for Netty
https://github.com/bupt1987/JgFramework https://github.com/menacher/java-game-server https://github.com/ksfzhaohui/gameserver https://github.com/wuyinxian124/nettybook2 https://github.com/ThinkCats/Netty https://github.com/barchart/barchart-http https://github.com/johnewart/gearman-java https://github.com/cuixin/XGameEnginee https://github.com/boldt/niosocks https://github.com/Flipkart/phantom https://github.com/mrniko/netty-socketio https://github.com/code4craft/netty-learning https://github.com/facebook/nifty https://github.com/cgbystrom/netty-tools https://github.com/spotify/netty-zmtp https://github.com/timboudreau/netty-http-client https://github.com/im-qq/netty-chat https://github.com/sinetja/netty-router https://github.com/biasedbit/malabarista https://github.com/langke93/rest-nettyserver https://github.com/commonrpc/commonrpc https://github.com/kangzhenkang/clover https://github.com/thierryherrmann/nettychat https://github.com/linyu19872008/cdeer-im https://github.com/itm/netty-protocols https://github.com/kangfoo/nettyDefinitiveGuide https://github.com/rafiqnayan/netty-file-server https://github.com/leiguorui/Netty-SpringMVC https://github.com/oracle1521/learn_zk_netty https://github.com/kgyhkgyh/file-transfer https://github.com/JAYAndroid/whiteboard https://github.com/songxin1990/moja https://github.com/buddygjw/nettyWebsocket https://github.com/CscwTeam/JNetty https://github.com/reines/httptunnel https://github.com/dempeZheng/ketty https://github.com/AllenDevelop/Netty-proxy https://github.com/burgleaf/IMSpeak https://github.com/yangchenjava/com.yangc.hub https://github.com/irelandKen/JNetty https://github.com/ksfzhaohui/gserver https://github.com/muarine/netty-framework https://github.com/bianlz/NettyDefinitiveGuide
====== link of Netty
http://download.csdn.net/detail/ebook369/9199519
Netty权威指南 第2版 [李林锋著作][电子工业出版社][2015.04][554页]sample.pdf
2011.7 -->jdk7
https://github.com/waylau/netty-4-user-guide-demos http://my.oschina.net/waylau/blog/380957 Netty 实现聊天功能
http://my.oschina.net/waylau/blog/392441 Netty 实现 WebSocket 聊天功能
http://my.oschina.net/tangcoffee/blog/340246 netty websocket 简单消息推送demo
基于netty-socketio的web推送服务 http://my.oschina.net/boonya/blog/381762
netty-socketio是一个开源的Socket.io服务器端的一个java的实现, 它基于Netty框架。 项目地址为: https://github.com/mrniko/netty-socketio
Netty 长连接服务 http://my.oschina.net/fir01/blog/467798
Netty笔记(四)Buffers http://my.oschina.net/XzhiF/blog/263657
http://my.oschina.net/u/2381728/blog/477444 Netty系列之Netty高性能之道
消息推送 http://my.oschina.net/u/1459148/b
4000
log/495438
netty的ip过滤 http://my.oschina.net/OutOfMemory/blog/364446 http://my.oschina.net/boonya/blog/381750 基于Netty与RabbitMQ的消息服务
http://my.oschina.net/u/1384382/blog/170229 netty4.0研究之一
Netty 实现自定义消息格式 http://my.oschina.net/grrrr/blog/187450
Netty 5.X 官方指南翻译版7 http://my.oschina.net/qiangzigege/blog/389087 http://my.oschina.net/qiangzigege/blog/393280 Netty3.10.1:关于TCP粘包问题 及 Encoder&Decoder
Netty那点事(二)Netty中的buffer http://my.oschina.net/flashsword/blog/164237
【netty实战】使用netty构建一个socks proxy http://my.oschina.net/flashsword/blog/169361
Netty使用Http上传文件 http://my.oschina.net/yzw/blog/517297
Netty+Protobuf编程 http://my.oschina.net/freegarden/blog/284826 http://javatar.iteye.com/blog/1126171 Grizzly和Netty以及Mina简单性能对比
Netty系列之Netty高性能之道 http://www.open-open.com/lib/view/open1403057331075.html http://blog.csdn.net/dc_726/article/details/47858077 Netty 4源码解析:服务端启动
用Netty开发中间件:高并发性能优化 http://blog.csdn.net/dc_726/article/details/48978891
用Netty开发中间件:网络编程基础 http://blog.csdn.net/dc_726/article/details/47912337 http://blog.csdn.net/kobejayandy/article/details/46822713 Netty通信网络参数配置
http://blog.csdn.net/ITer_ZC/article/details/39396169 Netty5源码分析(三) -- Channel如何注册OP_ACCEPT, OP_READ, OP_WRITE
Netty 4源码解析:请求处理 http://blog.csdn.net/dc_726/article/details/48084367 http://www.oschina.net/search?scope=blog&q=netty&p=3
***2
2015.11.11
http://www.csdn.net/article/2015-11-11/2826190
交易创建峰值达到每秒钟14万笔,支付宝的支付峰值达到每秒钟8.59万笔。
今年双11,阿里在90分钟以内,就可以创建一个像淘宝或者天猫,或者支付宝这样量级的大型架构,去满足技术和灾备需求。
由蚂蚁花呗的支付带动了支付成功率的提升至少有2%—3%,每个百分点至少能促进1.3亿消费
这意味着蚂蚁金服的支付系统如果要支撑每天100亿笔支付已经没有大的支付障碍。
互联网和电子商务本身不制造任何产品,只是被企业利用而诞生了销售奇迹,给他们带来了希望。这是新型中国实体经济的一个崛起。
Visa最新的实验室测试数据是每秒5.6万笔,另一家全球性支付清算平台MasterCard的实验室测试数据为每秒4万笔,
在实际应用中,Visa处理的峰值为每秒1.4万笔。支付宝此次创造的纪录比Visa快大约6倍。
======20151103
***1
http://baike.baidu.com/link?url=60thZOO7PC6zGuumllOM4mwTLjrFAnEzdnxpOKZIyaoX7FIP-UsaQPZu-o0v9w-xfWNyvM7tAWXLpFXojgmLla
CRLF=\r\n=1310
for linux --> \r ( it is 10, LF)
for Window -->\n\r ( it is 1310,CRLF)
***2
***1
======google protobuf
Google Protocol Buffer( 简称 Protobuf) 是 Google 公司内部的混合语言数据标准,
目前已经正在使用的有超过 48,162 种报文格式定义和超过 12,183 个 .proto 文件。他们用于 RPC 系统和持续数据存储系统。
Protocol Buffers 是一种轻便高效的结构化数据存储格式,可以用于结构化数据串行化,或者说序列化。它很适合做数据存储或 RPC 数据交换格式。
可用于通讯协议、数据存储等领域的语言无关、平台无关、可扩展的序列化结构数据格式。目前提供了 C++、Java、Python 三种语言的 API。
它其实是一个可以帮你生成自定义数据结构的代码,并提供了序列化该结构的方法,并且支持多语言,跨平台等一系列优点
message Order
{
required int32 time = 1;
required int32 userid = 2;
required float price = 3;
optional string desc = 4;
}
然后生成相应的类。
http://blog.csdn.net/superbfly/article/details/17920383
Protobuf定义了一套基本数据类型。几乎都可以映射到C++\Java等语言的基础数据类型.
======20151116
***1
肌纤维相当大,长度约为1至40毫米,直径约为10至100微米。相比而言,一根头发的直径约为100微米,而体内一般细胞的直径约为10微米。
肌纤维包含许多肌原纤维,它们是肌肉蛋白质组成的圆柱体。
在纤维内部,沿T小管间的长轴伸展的是称为肌质网的膜系统,用来存储和释放激发肌肉收缩的钙离子。
神经末梢在神经冲动到达时,释放乙酰胆碱,引起肌肉纤维的收缩。
人体的600条肌肉之间的互相合作,协助你度过每一天。
毛细血管负责携带红血球流经肌肉。肌肉剧烈收缩的时候,毛细血管遭到挤压,肌肉会开始缺氧,废物开始堆积。
但在压力极大的情形下,肌肉无法作出快速的反应,疲劳感于是不断袭来。
慢肌纤维在力量与爆发力方面逊色于快肌纤维,但其拥有很好的耐力。由于其含有氧气,线粒体,肌红蛋白(肌细胞中运输氧的色素,是一种结合蛋白,
与血红蛋白的一个亚单位相似,由一条珠蛋白的多肽链和一个血红素基团组成,它与红细胞释放的氧相结合,
起贮氧作用,并将其转运至肌细胞的线粒体,在那里氧将葡萄糖氧化,生成二氧化碳和水)所以颜色较深。
鸟类主要由慢肌纤维组成,因此可以做长时间的飞行。
蛋白质是生物体内一种极重要的高分子有机物,占人体干重的54%。蛋白质主要由氨基酸组成,因氨基酸的组合排列不同而组成各种类型的蛋白质。人体中估计有10万种以上的蛋白质。
每克蛋白质在体内氧化时提供的热量是18kJ,与葡萄糖相当。用蛋白质作能源是一种浪费,是大材小用。
***2
比如1000万的标挂出去,50元起投,估计1000-10000投资人,还有投资人设置了自动投标,
所以一秒钟之内会出现上千笔交易。而SQL Server本身却无法支撑横向扩展。
EDAS体系(企业级分布式应用服务,Enterprise Distributed Application Service),这样无论有多大流量都可以通过中间件将底层资源按照需求自动配置,
而在流量过去后可以自动释放,做到真正的分布式
投资人已经从红岭赚走了21亿,代收还有25个多亿。
去年红岭开创了创投第一个双十一,1日成交额5.537亿,占全国当天网贷11.87亿的46%还要多
***3
交易创建峰值达到每秒钟14万笔,支付宝的支付峰值达到每秒钟8.59万笔。
今年双11,阿里在90分钟以内,就可以创建一个像淘宝或者天猫,或者支付宝这样量级的大型架构,去满足技术和灾备需求。
由蚂蚁花呗的支付带动了支付成功率的提升至少有2%—3%,每个百分点至少能促进1.3亿消费
这意味着蚂蚁金服的支付系统如果要支撑每天100亿笔支付已经没有大的支付障碍。
互联网和电子商务本身不制造任何产品,只是被企业利用而诞生了销售奇迹,给他们带来了希望。这是新型中国实体经济的一个崛起。
Visa最新的实验室测试数据是每秒5.6万笔,另一家全球性支付清算平台MasterCard的实验室测试数据为每秒4万笔,
在实际应用中,Visa处理的峰值为每秒1.4万笔。支付宝此次创造的纪录比Visa快大约6倍。
听过李开复老师的演讲《算法的力量》,也阅读过吴军老师的大作《数学之美》,不得不说算法是许多高效计算机程序的灵魂。
目前跟算法特别是机器学习有关的应用主要有:个性化推荐/排序、风险控制、精细化运营、行业大数据据报告等等。
我这里主要说说机器学习相关的算法,像分类用我自己用的比较多的就是:SVM/LR/最大熵/以及各种基于决策树的方法;
聚类主要是kmeans及其变体;回归的话主要是线性回归/Lasso/Rigde等,损失函数通常会自己调整;推荐的话尝试过ALS。
在我们开始开发otto.de网上商店时,我们选择了分布式垂直架构。之前的工作经验告诉我们,一体化架构(monolithic architecture)不能够满足不断增长的需求。
爆发式增长的数据、持续提高的负载和对系统的扩展,所有的这些强迫我们去重新思考网站的架构。
======20151112
***1
======github project for Netty
https://github.com/bupt1987/JgFramework https://github.com/menacher/java-game-server https://github.com/ksfzhaohui/gameserver https://github.com/wuyinxian124/nettybook2 https://github.com/ThinkCats/Netty https://github.com/barchart/barchart-http https://github.com/johnewart/gearman-java https://github.com/cuixin/XGameEnginee https://github.com/boldt/niosocks https://github.com/Flipkart/phantom https://github.com/mrniko/netty-socketio https://github.com/code4craft/netty-learning https://github.com/facebook/nifty https://github.com/cgbystrom/netty-tools https://github.com/spotify/netty-zmtp https://github.com/timboudreau/netty-http-client https://github.com/im-qq/netty-chat https://github.com/sinetja/netty-router https://github.com/biasedbit/malabarista https://github.com/langke93/rest-nettyserver https://github.com/commonrpc/commonrpc https://github.com/kangzhenkang/clover https://github.com/thierryherrmann/nettychat https://github.com/linyu19872008/cdeer-im https://github.com/itm/netty-protocols https://github.com/kangfoo/nettyDefinitiveGuide https://github.com/rafiqnayan/netty-file-server https://github.com/leiguorui/Netty-SpringMVC https://github.com/oracle1521/learn_zk_netty https://github.com/kgyhkgyh/file-transfer https://github.com/JAYAndroid/whiteboard https://github.com/songxin1990/moja https://github.com/buddygjw/nettyWebsocket https://github.com/CscwTeam/JNetty https://github.com/reines/httptunnel https://github.com/dempeZheng/ketty https://github.com/AllenDevelop/Netty-proxy https://github.com/burgleaf/IMSpeak https://github.com/yangchenjava/com.yangc.hub https://github.com/irelandKen/JNetty https://github.com/ksfzhaohui/gserver https://github.com/muarine/netty-framework https://github.com/bianlz/NettyDefinitiveGuide
====== link of Netty
http://download.csdn.net/detail/ebook369/9199519
Netty权威指南 第2版 [李林锋著作][电子工业出版社][2015.04][554页]sample.pdf
2011.7 -->jdk7
https://github.com/waylau/netty-4-user-guide-demos http://my.oschina.net/waylau/blog/380957 Netty 实现聊天功能
http://my.oschina.net/waylau/blog/392441 Netty 实现 WebSocket 聊天功能
http://my.oschina.net/tangcoffee/blog/340246 netty websocket 简单消息推送demo
基于netty-socketio的web推送服务 http://my.oschina.net/boonya/blog/381762
netty-socketio是一个开源的Socket.io服务器端的一个java的实现, 它基于Netty框架。 项目地址为: https://github.com/mrniko/netty-socketio
Netty 长连接服务 http://my.oschina.net/fir01/blog/467798
Netty笔记(四)Buffers http://my.oschina.net/XzhiF/blog/263657
http://my.oschina.net/u/2381728/blog/477444 Netty系列之Netty高性能之道
消息推送 http://my.oschina.net/u/1459148/b
4000
log/495438
netty的ip过滤 http://my.oschina.net/OutOfMemory/blog/364446 http://my.oschina.net/boonya/blog/381750 基于Netty与RabbitMQ的消息服务
http://my.oschina.net/u/1384382/blog/170229 netty4.0研究之一
Netty 实现自定义消息格式 http://my.oschina.net/grrrr/blog/187450
Netty 5.X 官方指南翻译版7 http://my.oschina.net/qiangzigege/blog/389087 http://my.oschina.net/qiangzigege/blog/393280 Netty3.10.1:关于TCP粘包问题 及 Encoder&Decoder
Netty那点事(二)Netty中的buffer http://my.oschina.net/flashsword/blog/164237
【netty实战】使用netty构建一个socks proxy http://my.oschina.net/flashsword/blog/169361
Netty使用Http上传文件 http://my.oschina.net/yzw/blog/517297
Netty+Protobuf编程 http://my.oschina.net/freegarden/blog/284826 http://javatar.iteye.com/blog/1126171 Grizzly和Netty以及Mina简单性能对比
Netty系列之Netty高性能之道 http://www.open-open.com/lib/view/open1403057331075.html http://blog.csdn.net/dc_726/article/details/47858077 Netty 4源码解析:服务端启动
用Netty开发中间件:高并发性能优化 http://blog.csdn.net/dc_726/article/details/48978891
用Netty开发中间件:网络编程基础 http://blog.csdn.net/dc_726/article/details/47912337 http://blog.csdn.net/kobejayandy/article/details/46822713 Netty通信网络参数配置
http://blog.csdn.net/ITer_ZC/article/details/39396169 Netty5源码分析(三) -- Channel如何注册OP_ACCEPT, OP_READ, OP_WRITE
Netty 4源码解析:请求处理 http://blog.csdn.net/dc_726/article/details/48084367 http://www.oschina.net/search?scope=blog&q=netty&p=3
***2
2015.11.11
http://www.csdn.net/article/2015-11-11/2826190
交易创建峰值达到每秒钟14万笔,支付宝的支付峰值达到每秒钟8.59万笔。
今年双11,阿里在90分钟以内,就可以创建一个像淘宝或者天猫,或者支付宝这样量级的大型架构,去满足技术和灾备需求。
由蚂蚁花呗的支付带动了支付成功率的提升至少有2%—3%,每个百分点至少能促进1.3亿消费
这意味着蚂蚁金服的支付系统如果要支撑每天100亿笔支付已经没有大的支付障碍。
互联网和电子商务本身不制造任何产品,只是被企业利用而诞生了销售奇迹,给他们带来了希望。这是新型中国实体经济的一个崛起。
Visa最新的实验室测试数据是每秒5.6万笔,另一家全球性支付清算平台MasterCard的实验室测试数据为每秒4万笔,
在实际应用中,Visa处理的峰值为每秒1.4万笔。支付宝此次创造的纪录比Visa快大约6倍。
======20151103
***1
http://baike.baidu.com/link?url=60thZOO7PC6zGuumllOM4mwTLjrFAnEzdnxpOKZIyaoX7FIP-UsaQPZu-o0v9w-xfWNyvM7tAWXLpFXojgmLla
CRLF=\r\n=1310
for linux --> \r ( it is 10, LF)
for Window -->\n\r ( it is 1310,CRLF)
***2
相关文章推荐
- 新浪微博-首页富文本的事件处理
- json-list串研究
- linux查看java jdk安装路径和设置环境变量
- Android仿快递物流时间轴的代码实现
- 开源机器学习工具scikit-learn入门
- Sass入门-混合宏
- django 快速实现完整登录系统(cookie)
- java源码分析之LinkedHashMap
- Android捕获全局异常
- Android捕获全局异常
- 如何给一个应用添加一个StartView动画呢?
- SSO授权简介
- JSON-lib框架,JSON、XML和JAVA对象互转不再困难
- org.hibernate.MappingException:
- mysql 行转列
- MFC 读取图像双缓冲
- 常用无限极分类
- Node开发项目管理工具 Grunt 对比 Gulp
- object-C NSDate
- 只用1%的代码量实现google protobuf