mapreduce 视频
- 作者: OBM的那个啥
- 来源: 51数据库
- 2020-09-25
直接用hdfs就行了,它有一个设置上传的时候,不做缓存,可以直接左边打开一个流右边接入一个流就可以了。效率非常高,我之前的公司乐视网就是这么存视频文件。
经过近几年的发展nosql数据库逐渐火了起来,但是这并不意味开发者就要放弃原有的可以直接从巨量数据中获得真知的sql查询。
sqlstream ceo damian black在gigaom的 structure会议上带来了他们的方法,当提到流,black认为,流就是能对不停的数据进行处理,并且给出最后结果。
这个方法比hadoop以及传统的关系型数据库有着更低的延时,black说道:“虽然如此,但是系统对硬件和基础设施的需求同样比它们低,并且支持处理非常大体积的数据(同样不需要很高的开销)。”
black还指出,这些选项不一定就需要针对相同的用例,当然他们也可以被认为是互补的。“流处理已经被作为更多的插件添加”,black补充到。
经过近几年的发展nosql数据库逐渐火了起来,但是这并不意味开发者就要放弃原有的可以直接从巨量数据中获得真知的sql查询。
sqlstream ceo damian black在gigaom的 structure会议上带来了他们的方法,当提到流,black认为,流就是能对不停的数据进行处理,并且给出最后结果。
这个方法比hadoop以及传统的关系型数据库有着更低的延时,black说道:“虽然如此,但是系统对硬件和基础设施的需求同样比它们低,并且支持处理非常大体积的数据(同样不需要很高的开销)。”
black还指出,这些选项不一定就需要针对相同的用例,当然他们也可以被认为是互补的。“流处理已经被作为更多的插件添加”,black补充到。
推荐阅读
