1TB 文本分布在大小不均的文件中,如何用十台低内存机器组织处理?

未标记

Sorry o(╥﹏╥)o,暂无参考答案。带这道题,问问AI吧~

问 AI
本题目录

相关面经

1 篇

快手

AI Infra
一面
查看原面经 →
1Tb英文文本,存储在共享的1000多个文件 大小不均。目前目前有10台机器,每台内存8G,设计处理流程(考虑单机怎么处理?多机怎么处理?)
追问
那我分片足够多 不就行了吗?有什么问题?

相关题目

4 题