map reduce实现笛卡尔乘积?

发布于 2020-01-31 16:48:18
关注者
0
被浏览
1079
1 个回答
  • 面试哥
    面试哥 2020-01-31
    为面试而生,有面试问题,就找面试哥。

    参考回答:

    在Map阶段,将来自矩阵A的元素img标识成l条<key,value>的形式,key=(i,k),k=1,2,…,l。value=(j,img)。将来自矩阵B的元素img标识成l条<key,value>的形式,key=(i,k),k=1,2,…,m。value=(j,img)。

    Shuffle阶段将key相同的value放在相同的列表中

    在reduce的时候将key相同来自不同矩阵的value做笛卡儿积

    再将结果map成((i,j),value)的形式

    Shuffle将key相同的value放在同一列表中

    Reduce时key相同的value求和

知识点
面圈网VIP题库

面圈网VIP题库全新上线,海量真题题库资源。 90大类考试,超10万份考试真题开放下载啦

去下载看看