转 大数据框架对比:Hadoop、Storm、Samza、Spark和Flink
简介 大数据是收集、整理、处理大容量数据集,并从中获得见解所需的非传统战略和技术的总称。虽然处理数据所需的计算能力或存储容量早已超过一台计算机的上限,但这种计算类型的普遍性、规模,以及价值在最近几年才经历了大规模扩展。 在之前的文章中,我们曾经介绍过有关大数据 … 阅读全文
简介 大数据是收集、整理、处理大容量数据集,并从中获得见解所需的非传统战略和技术的总称。虽然处理数据所需的计算能力或存储容量早已超过一台计算机的上限,但这种计算类型的普遍性、规模,以及价值在最近几年才经历了大规模扩展。 在之前的文章中,我们曾经介绍过有关大数据 … 阅读全文
英文说明可参看原英文 homebrew安装lrzsz: $brew install lrzsz 下载github shell地址 上的脚本,然后copy到/usr/local/bin中 在ITerm2中需要使用的profile中,选择“Advance”-> … 阅读全文
代码管理(SCM):GitHub、GitLab、BitBucket、SubVersion 构建工具:Ant、Gradle、maven 自动部署:Capistrano、CodeDeploy 持续集成(CI):Bamboo、Hudson、Jenkins 配置管理: … 阅读全文
生产环境为了方便查看接口请求和响应,便于调试错误。 可以在nginx反向代理端及时查看接口信息。 需要ngx_lua模块支持 首先定义日志格式 log_format main '$remote_addr - $remote_user [$time_local] … 阅读全文