這些年,我們一起追的Hadoop
EE 領域有十多 年的講師教學經驗,熟悉 SOAP/RESTful Services、Design Patterns、EJB/JPA 等 Java EE 規 格,Struts/Spring/Hibernate 等 Open Source Framework,與 JBoss AS、 GlassFish 等 Application Server。 自認為會的技術不多,但是學不會的 也不多,最擅長把老闆交代的工作, Distribution for Apache Hadoop 2013 年拿到 35M 的 Funding,2014 年又從 Google 跟 Qualcomm 拿到 110M。 45 / 74 難得有不是萬年小學生的日本卡通! Hadoop 富二代 46 / 74 Parallel Processing: Tez Spark ... User Interface: Hue SQL on Hadoop: 跟 HiveQL 很接近 從 Impala 切入:Hive 的競爭對手,大家都支援 ANSI-SQL 從 Sqoop 切入:善用 JDBC 的經驗,整合 RDBMS/BI/DW 從 HBase 切入:學習 NoSQL ... 63 / 74 MySQL Hadoop Applier 直接讀取 MySQL 的 Binary Log Event,透過 libhdfs C Library 寫 到 Hadoop0 码力 | 74 页 | 45.76 MB | 1 年前3可觀測性 (Observability) 在 Kubernetes Day2 Operation的考量與實踐
Wistron DX Lab 緯創數位轉型技術實驗室 • 緯創資通員工 • 社群的參與者 • 技術的佈道師 • 台灣資料工程協會會員 • Kafka 修煉之道講師 Techlearn 個人技術學習與收集 Click to edit Master title style 3 Agenda Day2 Operation Challenge of Kubernetes Day 2 Operation0 码力 | 30 页 | 3.01 MB | 1 年前3k8s操作手册 2.3
containerd.sock �meout: 10 debug: false EOF ★crictl常用操作 crictl只支持pull拉取镜像及rmi删除镜像操作,不支持push及tag打标签 # crictl images #查看镜像,默认查询k8s.io命名空间,且不可指定命名 空间 # crictl ps pod-nginx-web1-v1.19.5 #pod名,这个名称可带小数点 labels: #给pod打标签,便于其他资源对它的选择 lbname: lbvalue-nginx-web1 spec: containers: 了,不会重新拉起一个新的pod,建议使用pod控制器去创建pod ★给目标node打标签 # kubectl label nodes node名称 标签名=标签值 # kubectl label nodes k8s-node01 cputype=i7-9700k #给指定的node结点打 标签 # kubectl label nodes --all=true0 码力 | 126 页 | 4.33 MB | 1 年前3Harbor - 企业级Docker 私有仓库
"insecure-registries": ["serverip"] } b、下载测试镜像 、下载测试镜像 docker pull hello-world c、给镜像重新打标签 、给镜像重新打标签 docker tag hello-world serverip/hello-world:latest d、登录进行上传 、登录进行上传 docker login serverip0 码力 | 4 页 | 171.12 KB | 1 年前325-云原生应用可观测性实践-向阳
采集器怎么运行 实战2 BPF和eBPF怎么配合 实战3 如何与eBPF交互 实战4 eBPF kprobe挂在哪 实战5 eBPF uprobe挂在哪 实战6 怎样编码 实战7 怎样传输 实战8 怎样打标签 实战9 怎样存储与检索 simplify the growing complexity © 2021, YUNSHAN Networks Technology Co., Ltd. All rights simplify the growing complexity © 2021, YUNSHAN Networks Technology Co., Ltd. All rights reserved. 实战8:怎样打标签 容 器 云 资源池 区域 可用区 虚拟化 宿主机 虚拟机 云服务 RDS Redis 容器 容器集群 容器节点 命名空间 容器服务 Ingress Deployment0 码力 | 39 页 | 8.44 MB | 6 月前3石油巨头与Kubernetes, Microservice & DevOps 共舞1114最终版
测试管 理平台 流⽔线编 排⼯具 代码质 量管控 镜像安 全扫描 运营统 计⼯具 XXXX 指标统计 XXXX 指标统计 XXXX 指标统计 XXXX 指标统计 运营统计 编译打 包 代码质量 管理 多语⾔ 构建 安全管控 构建实 践 测试管理 功能测 试 性能测试 接⼝测 试 产出物管 理 持续构建与测试 ⾃动部 署 配置管理 环境管 理 IDE 与DevOps⼯具紧密 集成 ü 代码变更管理任务 ü 本地代码扫描保证质量 ü 推荐Git 分⽀管理模型 ü 代码提交触发流⽔线 ü 流⽔线⾃动进⾏单元测 试 ü 流⽔线⾃动进⾏编译打 包 ü 流⽔线⾃动⽣成镜像 ü 流⽔线⾃动部署更新服 务 ü 事务管理⼯具跟踪状态 ü 跟踪团队开发进度 ü 测试case管理⼯具规范管 理 ü ⾃动化测试管理⼯具对测 试case进⾏图形化编排降0 码力 | 33 页 | 7.49 MB | 1 年前3K8S安装部署开放服务
drop Content-Type: keep kubectl apply -f 3-configmap.yaml Step4: 给所有的 node 打 label kubectl label nodes k8s-node2 IngressProxy=true kubectl label nodes k8s-node3 IngressProxy=true net/ygqygq2/article/details/103014350 See https://www.cnblogs.com/kevincaptain/p/10655721.html Step0: 打 label kubectl label nodes {k8s-node2,k8s-node3,k8s-node4} ceph-role=osd kubectl label nodes {k8s-node20 码力 | 54 页 | 1.23 MB | 1 年前3Istio + MOSN 在 Dubbo 场景下的探索之路
MOSN-cluster16/23 Dubbo 场景下的改造 /03 从数据面、控制面两个方面来介绍如何改造17/23 改造方案1 Istio+Envoy • 通过创建 EnvoyFilter 资源来给 xDS 资源打 patch • Envoy 解析 Dubbo 协议中的 Serivce 和 Method • 根据路由策略配置把流量转发到对应的 Provider • 通过WASM扩展 华为云:https://support0 码力 | 25 页 | 3.71 MB | 5 月前3QCon北京2018-《深度学习在微博信息流排序的应用》-刘博
用户特征 关键词 类型属性 topic 内容标签 内容质量 内容特征 组合特征 标签匹配度 用户互动率 协同特征 实时互动率 app互动率 微博内容 关注数据 用户信息 视觉标签 打码日志 社交关系 用户特征 发博流 互动流 曝光流 模型服务 模型训练 模型优化 模型评估 模型预测 CTR预估 排序策略 权值映射 业务排序 其他策略 特征工程 特征存储 特征查询0 码力 | 21 页 | 2.14 MB | 1 年前3【PyTorch深度学习-龙龙老师】-测试版202112
data.Dataset.from_tensor_slices((x, y)) # 构建 Dataset 对象 将数据转换成 Dataset 对象后,一般需要再添加一系列的数据集标准处理步骤,如随机打 散、预处理、按批装载等。 5.7.1 随机打散 通过 Dataset.shuffle(buffer_size)工具可以设置 Dataset 对象随机打散数据之间的顺序, 防止每次训练时数据 问题的讨论,我们引出本章的核心内容:卷积神经网络。这也是层数可以轻松达到上百层 的一类神经网络。 10.1 全连接网络的问题 首先我们来分析全连接网络存在的问题。考虑一个简单的 4 层全连接层网络,输入是 28 × 28打平后为 784 节点的手写数字图片向量,中间三个隐藏层的节点数都是 256,输出 层的节点数是 10,如图 10.1 所示。 预览版202112 第 10 章 卷积神经网络 2 解码器 然后再来创建解码器子网络,这里基于隐藏向量 h_dim 依次升维到 128、256、784 长 度,除最后一层,激活函数使用 ReLU 函数。解码器的输出为 784 长度的向量,代表了打 平后的28 × 28大小图片,通过 Reshape 操作即可恢复为图片矩阵。代码如下: # 创建 Decoders 网络, decoder 的输出应该是输入的特征同 shape0 码力 | 439 页 | 29.91 MB | 1 年前3
共 31 条
- 1
- 2
- 3
- 4