大数据

白天 夜间 首页 下载 阅读记录
  我的书签   添加书签   移除书签

spark-ml部署线上

浏览 54 扫码 分享 2023-11-23 13:21:44
  • 前言
  • 解决方案

    前言

    最近使用spark-ml做数据模型训练,考虑到怎么把模型部署到线上环境。本尝试spring-boot启动spark-local模式预测,发现线上预测需要200ms~300ms,耗时太多。所以考虑把spark模型转换为pmml格式。我的spark集群版本为2.4.5

    解决方案

    使用jpmml-sparkml-executable生成PMML模型文件
    官网:https://github.com/jpmml/jpmml-sparkml#documentation
    部分样例:https://my.oschina.net/kyo4321/blog/2878932
    其他

    若有收获,就点个赞吧

    0 人点赞

    上一篇:
    下一篇:
    • 书签
    • 添加书签 移除书签
    • Filebeat 安装
    • Kafka命令大全
    • spark-ml部署线上
    • 浪潮Arm服务器大数据软件测试
    • Arm服务器Spark 提交任务遇到问题
    • 贝叶斯算法
    • P(AB)与P(A|B)的区别是什么?
    • SQL
    • SparkSql几个常用函数
    • TF-IDF算法
    • Kettle 的使用
    • 常用ETL工具
    • Spark API使用
    • 编译器 Spark配置
    • Maven打包
    • Spark-Shell 使用
    • 逻辑回归算法
    • SparkMLlib 基本算法
    • 蓄水池抽样
    • MapReduce过程解析
    • K-Means算法
    • Hadoop集群命令
    • Hadoop WordCount
    • Hadoop学习记录
    • HBase学习与记录
    暂无相关搜索结果!

      让时间为你证明

      展开/收起文章目录

      分享,让知识传承更久远

      文章二维码

      手机扫一扫,轻松掌上读

      文档下载

      请下载您需要的格式的文档,随时随地,享受汲取知识的乐趣!
      PDF文档 EPUB文档 MOBI文档

      书签列表

        阅读记录

        阅读进度: 0.00% ( 0/0 ) 重置阅读进度

          思维导图备注