资料下载
×
基于自定义架构的局部处理机
消耗积分:2 |
格式:rar |
大小:0.84 MB |
2018-01-10
分享资料个
针对企业生产过程中存在大量原始数据需要实时处理的问题，设计并实现了一个基于自定义架构的局部处理机。在设计之初以Hadoop的并行架构为参考，对MapReduce的工作原理和缓存方式进行了分析，在此基础上根据实际生产环境设计了一个“多类线程协同处理”的程序架构，并辅以两类自定义的数据缓存方式，保证了分布式系统中的局部处理机在接收、计算、上传各环节的并发性和正确性。该系统投入实际生产并连续使用一年有余，实现了将企业多个车间生成的原始数据进行实时处理的预期目标，具有很好的稳定性、有效性和可扩展性。实际应用结果表明，自定义的程序架构和有效的缓存方式能实现大量数据的同步处理及分析。
声明：本文内容及配图由入驻作者撰写或者入驻合作网站授权转载。文章观点仅代表作者本人，不代表电子发烧友网立场。文章及其配图仅供工程师学习之用，如有内容侵权或者其他违规问题，请联系本站处理。 举报投诉
评论(0)
发评论
- 相关下载
- 相关文章
