PaddleDTX 1.0.0 中文文档
01 月 25 日 整体介绍 1 系统介绍 1 2 基本概念 3 3 正在进行中 5 4 快速安装 7 5 编译和安装 9 6 客户端工具 21 7 案例应用-线性回归算法测试 27 8 案例应用-逻辑回归算法测试 33 9 部署架构 37 10 Distributed AI 39 11 XuperDB 41 12 Crypto 45 13 我们的团队 49 14 参与开发 点确认数据使用权,由任务执行节点最终执行。 2.4 算法 PaddleDTX 中的算法,一般指的是经过分布式改造的机器学习算法,即联邦学习算法。 目前开源了纵向联邦学习算法,包括多元线性回归和多元逻辑回归。 2.5 训练样本和预测数据集 PaddleDTX 中的训练样本和预测数据集都是以文件的形式存储于中心化存储网络,在发布训练任务或者预测 任务的时候,由计算需求节点指定。 2.6 模型 CHAPTER3 正在进行中 我们即将支持的主要功能如下: 1. 支持更多的机器学习算法和对应的分布式改造,主要包括神经网络、决策树等; 2. 支持横向联邦学习算法,计划先对多元线性回归和多元逻辑回归进行改造; 3. 提供联邦学习训练参数的评估能力,通过交叉验证等方式评估训练参数的优劣; 4. 优化目前使用的加法同态算法 Paillier 的性能; 5. 去中心化存储服务支持负载均0 码力 | 57 页 | 624.94 KB | 1 年前3PaddleDTX 1.1.0 中文文档
03 月 29 日 整体介绍 1 系统介绍 1 2 基本概念 3 3 正在进行中 7 4 快速安装 9 5 编译和安装 11 6 客户端工具 23 7 案例应用-线性回归算法测试 29 8 案例应用-逻辑回归算法测试 35 9 部署架构 39 10 Distributed AI 41 11 XuperDB 49 12 Crypto 53 13 我们的团队 57 14 参与开发 点确认数据使用权,由任务执行节点最终执行。 2.4 算法 PaddleDTX 中的算法,一般指的是经过分布式改造的机器学习算法,即联邦学习算法。 目前开源了纵向联邦学习算法,包括多元线性回归和多元逻辑回归。 2.5 训练样本和预测数据集 PaddleDTX 中的训练样本和预测数据集都是以文件的形式存储于中心化存储网络,在发布训练任务或者预测 任务的时候,由计算需求节点指定。 2.6 模型 CHAPTER3 正在进行中 我们即将支持的主要功能如下: 1. 支持更多的机器学习算法和对应的分布式改造,主要包括神经网络、决策树等; 2. 支持横向联邦学习算法,计划先对多元线性回归和多元逻辑回归进行改造; 3. 优化目前使用的加法同态算法 Paillier 的性能; 4. 去中心化存储服务支持负载均衡策略,根据存储节点剩余资源和以往表现情况,在文件分发时找到最 优节点列表。0 码力 | 65 页 | 687.09 KB | 1 年前3PaddleDTX 1.0.0 中文文档
快速安装 编译和安装 源码编译和安装 通过 docker 安装 客户端工具 操作XuperDB 操作Distributed AI 案例应用-线性回归算法测试 案例简介 测试脚本说明 上传样本文件 训练任务 预测任务 模型评估 案例应用-逻辑回归算法测试 案例简介 测试脚本说明 上传样本文件 训练任务 预测任务 模型评估 系统详解 部署架构 计算需求方(Requester) 任务执行节点(Executor 持有节点确认数据使用权,由 任务执行节点最终执行。 算法 PaddleDTX中的算法,一般指的是经过分布式改造的机器学习算法,即联邦学 习算法。 目前开源了纵向联邦学习算法,包括多元线性回归和多元逻辑回归。 训练样本和预测数据集 PaddleDTX中的训练样本和预测数据集都是以文件的形式存储于中心化存储网 络,在发布训练任务或者预测任务的时候,由计算需求节点指定。 模型 算法和训练样 到最终结 果。 正在进行中 我们即将支持的主要功能如下: 1. 支持更多的机器学习算法和对应的分布式改造,主要包括神经网络、决策 树等; 2. 支持横向联邦学习算法,计划先对多元线性回归和多元逻辑回归进行改 造; 3. 提供联邦学习训练参数的评估能力,通过交叉验证等方式评估训练参数的 优劣; 4. 优化目前使用的加法同态算法Paillier的性能; 5. 去中心化存储服务支持负载0 码力 | 53 页 | 1.36 MB | 1 年前3PaddleDTX 1.1.0 中文文档
快速安装 编译和安装 源码编译和安装 通过 docker 安装 客户端工具 操作XuperDB 操作Distributed AI 案例应用-线性回归算法测试 案例简介 测试脚本说明 上传样本文件 训练任务 预测任务 模型评估 案例应用-逻辑回归算法测试 案例简介 测试脚本说明 上传样本文件 训练任务 预测任务 模型评估 系统详解 部署架构 计算需求方(Requester) 任务执行节点(Executor 持有节点确认数据使用权,由 任务执行节点最终执行。 算法 PaddleDTX中的算法,一般指的是经过分布式改造的机器学习算法,即联邦学 习算法。 目前开源了纵向联邦学习算法,包括多元线性回归和多元逻辑回归。 训练样本和预测数据集 PaddleDTX中的训练样本和预测数据集都是以文件的形式存储于中心化存储网 络,在发布训练任务或者预测任务的时候,由计算需求节点指定。 模型 算法和训练样 时,可获得一系列评估指标,展示训练效果变化趋势。 正在进行中 我们即将支持的主要功能如下: 1. 支持更多的机器学习算法和对应的分布式改造,主要包括神经网络、决策 树等; 2. 支持横向联邦学习算法,计划先对多元线性回归和多元逻辑回归进行改 造; 3. 优化目前使用的加法同态算法Paillier的性能; 4. 去中心化存储服务支持负载均衡策略,根据存储节点剩余资源和以往表现 情况,在文件分发时找到最优节点列表。 快速安装0 码力 | 57 页 | 1.38 MB | 1 年前3FISCO BCOS 2.9.0 中文文档
BCOS支持x86_64和aarch64(ARM)架构的CPU 由于节点多群组共享网络带宽、CPU和内存资源,因此为了保证服务的 稳定性,一台机器上不推荐配置过多节点。 下表是单群组单节点推荐的配置,节点耗费资源与群组个数呈线性关系,您 可根据实际的业务需求和机器资源,合理地配置节点数目。 配置 最低配置 推荐配置 CPU 1.5GHz 2.4GHz 内存 1GB 8GB 核心 1核 8核 带宽 1Mb 10Mb 方法一就是 常见的互联网分布式系统的做法,方法二是区块链。 可见,目的不同,导致 设计哲学、系统结构、最终效果都不同。 如何把“好钢用到刀刃上” 综上所述,区块链这种“分布式系统”,存储成本和节点数同比线性增加,而 计算效率不升反降,使整个系统显得“贵”和“重”,这和互联网服务的“轻快 灵”相背而驰。最要命的是,难以通过增加硬件、带宽、节点数来显著提升并 行处理能力和存储量。 但区块链的“网络规模效应”并不体现在硬件和计算 不同的账本,区块链节点可以根据业务关系选择群组加入,参与到对应账本 的数据共享和共识过程中。群组架构具有良好的扩展性,一个机构一旦参与 到这样的联盟链里,有机会灵活快速地丰富业务场景和扩大业务规模,而系 统的运维复杂度和管理成本也线性下降。 隐私保护:各群组之间解除耦合独立运作 回想一下群聊场景:群聊用户都在你的通信录中,都是经过验证才添加的, 且不在群里的用户看不到群聊信息。这与联盟链准入机制不谋而合,所有参 与者的机构身份可知。0 码力 | 2649 页 | 201.08 MB | 1 年前3FISCO BCOS 2.7.2 中文文档
BCOS支持x86_64和aarch64(ARM)架构的CPU 由于节点多群组共享网络带宽、CPU和内存资源,因此为了保证服务的 稳定性,一台机器上不推荐配置过多节点。 下表是单群组单节点推荐的配置,节点耗费资源与群组个数呈线性关系,您 可根据实际的业务需求和机器资源,合理地配置节点数目。 配置 最低配置 推荐配置 CPU 1.5GHz 2.4GHz 内存 1GB 8GB 核心 1核 8核 带宽 1Mb 10Mb 方法一就是 常见的互联网分布式系统的做法,方法二是区块链。 可见,目的不同,导致 设计哲学、系统结构、最终效果都不同。 如何把“好钢用到刀刃上” 综上所述,区块链这种“分布式系统”,存储成本和节点数同比线性增加,而 计算效率不升反降,使整个系统显得“贵”和“重”,这和互联网服务的“轻快 灵”相背而驰。最要命的是,难以通过增加硬件、带宽、节点数来显著提升并 行处理能力和存储量。 但区块链的“网络规模效应”并不体现在硬件和计算 不同的账本,区块链节点可以根据业务关系选择群组加入,参与到对应账本 的数据共享和共识过程中。群组架构具有良好的扩展性,一个机构一旦参与 到这样的联盟链里,有机会灵活快速地丰富业务场景和扩大业务规模,而系 统的运维复杂度和管理成本也线性下降。 隐私保护:各群组之间解除耦合独立运作 回想一下群聊场景:群聊用户都在你的通信录中,都是经过验证才添加的, 且不在群里的用户看不到群聊信息。这与联盟链准入机制不谋而合,所有参 与者的机构身份可知。0 码力 | 2520 页 | 211.87 MB | 1 年前3FISCO BCOS 2.8.0 中文文档
BCOS支持x86_64和aarch64(ARM)架构的CPU 由于节点多群组共享网络带宽、CPU和内存资源,因此为了保证服务的 稳定性,一台机器上不推荐配置过多节点。 下表是单群组单节点推荐的配置,节点耗费资源与群组个数呈线性关系,您 可根据实际的业务需求和机器资源,合理地配置节点数目。 配置 最低配置 推荐配置 CPU 1.5GHz 2.4GHz 内存 1GB 8GB 核心 1核 8核 带宽 1Mb 10Mb 方法一就是 常见的互联网分布式系统的做法,方法二是区块链。 可见,目的不同,导致 设计哲学、系统结构、最终效果都不同。 如何把“好钢用到刀刃上” 综上所述,区块链这种“分布式系统”,存储成本和节点数同比线性增加,而 计算效率不升反降,使整个系统显得“贵”和“重”,这和互联网服务的“轻快 灵”相背而驰。最要命的是,难以通过增加硬件、带宽、节点数来显著提升并 行处理能力和存储量。 但区块链的“网络规模效应”并不体现在硬件和计算 不同的账本,区块链节点可以根据业务关系选择群组加入,参与到对应账本 的数据共享和共识过程中。群组架构具有良好的扩展性,一个机构一旦参与 到这样的联盟链里,有机会灵活快速地丰富业务场景和扩大业务规模,而系 统的运维复杂度和管理成本也线性下降。 隐私保护:各群组之间解除耦合独立运作 回想一下群聊场景:群聊用户都在你的通信录中,都是经过验证才添加的, 且不在群里的用户看不到群聊信息。这与联盟链准入机制不谋而合,所有参 与者的机构身份可知。0 码力 | 2534 页 | 212.43 MB | 1 年前3FISCO BCOS 2-dev 中文文档
开发手册 内存要求 硬件要求 注解 由于节点多群组共享网络带宽、CPU和内存资源,因此为了保证服务的稳定 性,一台机器上不推荐配置过多节点。 下表是单群组单节点推荐的配置,节点耗费资源与群组个数呈线性关系,您 可根据实际的业务需求和机器资源,合理地配置节点数目。 配置 最低配置 推荐配置 CPU 1.5GHz 2.4GHz 内存 1GB 8GB 核心 1核 8核 带宽 1Mb 10Mb 方法一就是 常见的互联网分布式系统的做法,方法二是区块链。 可见,目的不同,导致 设计哲学、系统结构、最终效果都不同。 如何把“好钢用到刀刃上” 综上所述,区块链这种“分布式系统”,存储成本和节点数同比线性增加,而 计算效率不升反降,使整个系统显得“贵”和“重”,这和互联网服务的“轻快 灵”相背而驰。最要命的是,难以通过增加硬件、带宽、节点数来显著提升并 行处理能力和存储量。 但区块链的“网络规模效应”并不体现在硬件和计算 不同的账本,区块链节点可以根据业务关系选择群组加入,参与到对应账本 的数据共享和共识过程中。群组架构具有良好的扩展性,一个机构一旦参与 到这样的联盟链里,有机会灵活快速地丰富业务场景和扩大业务规模,而系 统的运维复杂度和管理成本也线性下降。 隐私保护:各群组之间解除耦合独立运作 回想一下群聊场景:群聊用户都在你的通信录中,都是经过验证才添加的, 且不在群里的用户看不到群聊信息。这与联盟链准入机制不谋而合,所有参 与者的机构身份可知。0 码力 | 2378 页 | 204.39 MB | 1 年前3FISCO BCOS 2.6.0 中文文档
make doc 硬件要求 注解 由于节点多群组共享网络带宽、CPU和内存资源,因此为了保证服务的稳定 性,一台机器上不推荐配置过多节点。 下表是单群组单节点推荐的配置,节点耗费资源与群组个数呈线性关系,您 可根据实际的业务需求和机器资源,合理地配置节点数目。 配置 最低配置 推荐配置 CPU 1.5GHz 2.4GHz 内存 1GB 8GB 核心 1核 8核 带宽 1Mb 10Mb 方法一就是 常见的互联网分布式系统的做法,方法二是区块链。 可见,目的不同,导致 设计哲学、系统结构、最终效果都不同。 如何把“好钢用到刀刃上” 综上所述,区块链这种“分布式系统”,存储成本和节点数同比线性增加,而 计算效率不升反降,使整个系统显得“贵”和“重”,这和互联网服务的“轻快 灵”相背而驰。最要命的是,难以通过增加硬件、带宽、节点数来显著提升并 行处理能力和存储量。 但区块链的“网络规模效应”并不体现在硬件和计算 不同的账本,区块链节点可以根据业务关系选择群组加入,参与到对应账本 的数据共享和共识过程中。群组架构具有良好的扩展性,一个机构一旦参与 到这样的联盟链里,有机会灵活快速地丰富业务场景和扩大业务规模,而系 统的运维复杂度和管理成本也线性下降。 隐私保护:各群组之间解除耦合独立运作 回想一下群聊场景:群聊用户都在你的通信录中,都是经过验证才添加的, 且不在群里的用户看不到群聊信息。这与联盟链准入机制不谋而合,所有参 与者的机构身份可知。0 码力 | 2383 页 | 18.83 MB | 1 年前3FISCO BCOS 2.9.0 中文文档
BCOS支持x86_64和aarch64(ARM)架构的CPU 由于节点多群组共享网络带宽、CPU和内存资源,因此为了保证服务的 稳定性,一台机器上不推荐配置过多节点。 下表是单群组单节点推荐的配置,节点耗费资源与群组个数呈线性关系,您 可根据实际的业务需求和机器资源,合理地配置节点数目。 配置 最低配置 推荐配置 CPU 1.5GHz 2.4GHz 内存 1GB 8GB 核心 1核 8核 带宽 1Mb 10Mb 方法一就是 常见的互联网分布式系统的做法,方法二是区块链。 可见,目的不同,导致 设计哲学、系统结构、最终效果都不同。 如何把“好钢用到刀刃上” 综上所述,区块链这种“分布式系统”,存储成本和节点数同比线性增加,而 计算效率不升反降,使整个系统显得“贵”和“重”,这和互联网服务的“轻快 灵”相背而驰。最要命的是,难以通过增加硬件、带宽、节点数来显著提升并 行处理能力和存储量。 但区块链的“网络规模效应”并不体现在硬件和计算 不同的账本,区块链节点可以根据业务关系选择群组加入,参与到对应账本 的数据共享和共识过程中。群组架构具有良好的扩展性,一个机构一旦参与 到这样的联盟链里,有机会灵活快速地丰富业务场景和扩大业务规模,而系 统的运维复杂度和管理成本也线性下降。 隐私保护:各群组之间解除耦合独立运作 回想一下群聊场景:群聊用户都在你的通信录中,都是经过验证才添加的, 且不在群里的用户看不到群聊信息。这与联盟链准入机制不谋而合,所有参 与者的机构身份可知。0 码力 | 2649 页 | 201.08 MB | 1 年前3
共 35 条
- 1
- 2
- 3
- 4