大数据日报2016-05-12 用实例讲解Spark Sreaming 等20条

2016年5月29日 | By News | Filed in: 未分类.

Source: http://bd.memect.com/archive/2016-05-12/long.html

用实例讲解Spark Sreaming

来自 @Linuxeden开源社区 好东西传送门整理

关键词:计算框架, 数据库, HBase, Spark

【用实例讲解Spark Sreaming】 本篇文章用Spark Streaming +Hbase为列,Spark Streaming专为流式数据处理,对Spark核心API进行了相应的扩展。 什么是Spark Streaming… [1]

[1] http://www.linuxeden.com/html/news/20160512/166107.html

用实例讲解Spark Sreaming

最新技术博客:Spark性能优化指南

来自 @美团点评技术团队 好东西传送门整理

关键词:计算框架, Spark

【最新技术博客:Spark性能优化指南】Spark虽以快著称,但如不进行合理的调优,很可能发挥不出优势。美团•大众点评团队在实践中积累了一套性能优化方案,分为开发、资源、数据倾斜、shuffle四部分。尤其后两部分,相关资料比较稀缺。全文分初级篇 [1] 和高级篇 [2] …全文: http://m.weibo.cn/2307673587/3974368423938261

[1] http://tech.meituan.com/spark-tuning-basic.html

[2] http://tech.meituan.com/spark-tuning-pro.html

早年的 Flickr 是如何"滥用"MySQL的

来自 @湾区日报BayArea 好东西传送门整理

关键词:数据库, MySQL, NoSQL

【早年的 Flickr 是如何”滥用”MySQL的】一个MySQL数据库,多种快糙猛的用途:当做key-value store用、做nosql用、做event queue用、做数据仓库用。 | 简评: [1] 原链: [2] #湾区日报#

[1] https://wanqu.co/p/1674

[2] https://wanqu.co/r/1400

应该对docker有个清晰的定位

来自 @祝威廉二世 好东西传送门整理

关键词:计算框架, 虚拟化, Docker, YARN, 容器

我觉得应该对docker有个清晰的定位 这篇文章写于去年 但是目前来看 思路也还是对的 另外文末提及了我开源的基于 yarn 的容器调度工具 感兴趣可以看看 其实连Docker公司都把Docker用错啦 [1]

[1] http://www.jianshu.com/p/55a735f5144c?utm_campaign=hugo&utm_medium=reader_share&utm_content=note&utm_source=weibo

基于OpenStack的云测试平台

来自 @InfoQ 好东西传送门整理

关键词:云服务, OpenStack

【基于OpenStack的云测试平台】OpenStack是当前最流行的开源云计算平台之一,它可以帮助企业完成私有云平台搭建,提供基础设施服务。我们利用OpenStack完成云测试平台研发。本文主要介绍云测试平台的主要技术特点以及其在测试方面的应用。 [1]

[1] http://www.infoq.com/cn/articles/cloud-test-platform-based-on-openstack

基于OpenStack的云测试平台

完整版

点此链接查看全部20条:http://bd.memect.com/archive/2016-05-12/long.html


Comments are closed here.