Lore 机器学习模型配置、部署简化框架

开源网站开源项目 24-06-26 16:03:44

Lore 是一个 Python 框架,旨在让工程师更容易接受机器学习,让数据科学家更容易维护机器学习。

功能特性

模型支持使用数据管道对估算器进行超参数搜索。他们将有效地利用多个 GPU(如果可用)和几种不同的策略,并且因水平可伸缩性可以保存和分发。

支持来自多个软件包的估算器,包括 Keras、XGBoost 和 SciKit Learn。它们都可以通过构建、调试或预测覆盖来进行分类,以完全自定义你的算法和架构,同时还可以从其他很多方面受益。

管道可以避免训练和测试之间的信息泄漏,一条管道可以用许多不同的估算器进行实验。如果机器可用 RAM 空间不够,则可使用基于磁盘的管道。

转化器标准化高级功能编程。例如,根据美国人口普查数据将美国名字转换为其统计年龄或性别;从自由格式的电话号码字符串中提取地理区号;常见的日期、时间和字符串操作可通过 pandas 得到有效支持。

编码器为估算器提供足够的输入,并避免常见的缺失和长尾值问题。经过充分测试,它们可以帮助你避免从垃圾中检索信息。

对于流行的 (No)SQL 数据库,整个应用程序以标准化的方式配置 IO 连接,对批量数据进行事务管理和读写优化,而不是使用典型的 ORM 操作。除了用于分发模型和数据集的加密 S3 buckets 之外,连接还共享一个可配置的查询缓存。

对开发中的每个应用程序进行依赖关系管理,且可100%复制到生产环境中。无需手动激活,没有破坏 Python 的环境变量或隐藏的文件。无需 venv、pyenv、pyvenv、virtualenv、virtualenvwrapper、pipenv、conda 相关知识。

模型测试可在自己的持续集成环境中进行,允许代码和训练更新持续部署,而不增加基础架构团队的工作量。

命令行、Python 控制台、jupyter 笔记本或 IDE 都有工作流支持。每个环境都可以为生产和开发配置可读的日志和时序语句。

[Lore 机器学习模型配置、部署简化框架]相关推荐
MATLAB 数学软件

MATLAB 数学软件

MATLAB是矩阵实验室(Matrix Laboratory)的简称,是美国MathWorks公司出品的商业数学软件,用于算法开发……...

GPT2 GPT-2 训练实现

非官方 GPT-2 训练实现,支持 GPU 和 TPU。 GPT-2 是一种基于 transformer的大型语言模型,具有 15 亿个……...

Texture iOS 异步渲染 UI 框架

Texture 是异步渲染 UI 框架,该库的设计思想对很多 UI 框架产生了影响,封装动态化框架如果想要异步渲染……...

Entangle 单反相机控制小程序

Entangle 单反相机控制小程序

Entangle 是一个允许通过计算机控制单反相机拍照的小程序。 提供的功能有: 支持通过 USB 链接并控制尼……...

VCL 虚拟 OpenCL 平台

VirtualCL(VCL)集群平台是OpenCL™的封装器,允许大多数未经修改的应用程序透明地利用集群中的多个OpenC……...

PyMySQL MySQL 客户端库

PyMySQL 是一个纯 Python 实现的 MySQL 客户端库,支持兼容 Python 3,用于代替 MySQLdb。 注意:PyMySQL……...

今日开源
  1. kele 任务管理系统

    kele 任务管理系统

    自动生成数据库,HTML 表单,以此为基础,扩展各种表单和数据库,数据库字段自动匹配数据的格式及处理。 希望由面向程序员到面向用户,用户直接做做选择题,即能实现想要的功能。 系统说明: 第一步建字段,先设想……

    开源软件 2024-07-02

  2. Thyme 自动追踪使用应用程序的时间

    Thyme 可以自动追踪你使用应用程序的时间。 特性: 简单的命令行界面: 每 30s 记录一次你使用的应用 $ while true; do thyme track -o thyme.json; sleep 30s; done; 在新窗口创建图表以显示……

    开源软件 2024-07-02

  3. Una 尤娜博客系统

    Una 尤娜博客系统

    Una [‘尤娜’] 只是一个项目代号,没有特殊含义。尤娜是站在巨人的肩膀上开发完成的博客系统,旨在为程序员提供一个极简的内容创作管理平台,尤娜100%开放源代码,如果您对她感兴趣,Fork她,并尽情的……

    开源软件 2024-07-02

返回顶部小火箭