本文主要是介绍obs对象存储 + 机器学习模型 + spark处理,希望对大家解决编程问题提供一定的参考价值,需要的开发者们随着小编来一起学习吧!
在思考一个问题:
大量图片,文本,视频数据,怎样存储? (一般用obs好点吧,可能比hdfs好点)
怎样找出这些数据中重要、有效数据,并给这些数据打上便签,在需要时根据标签提取使用???(机器学习模型训练出来结果, 可以借用spark处理)
架构方案:
原理:
代码实现:
参考资料:
https://helpcdn.aliyun.com/document_detail/97906.html?spm=a2c4g.11186623.6.1748.24af40eaTem6k8
https://help.aliyun.com/document_detail/43135.html?spm=a2c4g.11186623.2.11.24024bf04Znq8l
https://helpcdn.aliyun.com/document_detail/69469.html
这篇关于obs对象存储 + 机器学习模型 + spark处理的文章就介绍到这儿,希望我们推荐的文章对编程师们有所帮助!