Koloboke: 又一位大神的作品,目标是低内存高性能。 Trove: 挂在bitbucket上面的一个开源项目。 因为是为了比赛而接触的这些库,所以我只按照比赛场景给他们做了测试。.../ 1024 / 1024 println(s"$message size is ${sizeInGB}GB") } 之后,依次使用Eclipse Collections, Hppc, Koloboke...和Trove,就完成了我们的Benchmark编写: import java.util.concurrent.TimeUnit import com.koloboke.collect.impl.hash.MutableLHashParallelKVLongLongMapGO...MutableLHashParallelKVLongLongMapGO() with LongLongOp testSetTraverse(map) printlnObjectSize("Koloboke...结果 运行的过程中,Koloboke报一个诡异的空指针错误,所以没有通过测试;FastUtils在这个量级好像有点慢,不乐意等所以最终没有把它加入测试。最终我们得到如下的结果列表: ?
用于归一化处理 store 访问外部存储进行特征展开,如: 使用uid获取用户完整数据 cross 将FeatureVector内两个特征向量进行交叉运算 为了获取更好的性能和存储空间优化,我们使用了koloboke
官网 Koloboke:Hash set和hash map。官网 Trove:基础类型集合。
Koloboke - Hash sets and hash maps.
Koloboke -哈希集和散列图。
领取专属 10元无门槛券
手把手带您无忧上云