mapreduce是一种编程bai模型,用于大du规模数据集zhi(大于1tb)的并行运算。概念dao"map(映射)"和"reduce(规专约)",和他们的主要属思想,都是从函数式编程语言里借来的,还有从矢量编程语言里借来的特性。他极大地方便了编程人员在不会分布式并行编程的情况下,将自己的程序运行在分布式系统上。 当前的实现是指定一个map(映射)函数,用来把一组键值对映射成一组新的键值对,指定并发的reduce(规约)函数,用来保证所有映射的键值对中的每一个共享相同的键组。
了解更多开源相关,去lupa社区看看吧
hadoop|
apache pig|
apache kafka|
apache storm|
impala|
zookeeper|
sas|
tensorflow|
人工智能基础|
apache kylin|
openstack|
flink|
mapreduce|
大数据|
云计算|
用户登录
还没有账号?立即注册
用户注册
投稿取消
文章分类: |
|
还能输入300字
上传中....