Flink-1.12（五）Flink 运行架构
JobManager 控制一个应用程序执行的主进程，也就是说，每个应用程序都会被一个不同的JobManager 所控制执行。 JobManager 会先接收到要执行的应用程序，这个应用程序回包括：作业图（JobGraph）、逻辑数据流图（logical dataflow graph）和打包了所有类、...
iseeyu3年前 (2024-02-21)136
四则运算(斐波那契体诗)
图一 四则运算示意图 加 减 乘除 括号辅 运算有四则 阿拉伯数字万物合 数字和浮点演绎着有理与无理 自然世界多变化符号公式和公理数学之花绽寰宇 上面是我试写的一首“斐波那契体诗”，它是“数学诗”的一种，写作规则为：诗的第一行字数是1，第二行的字数也是1，从第三行开始，每行的字数...
iseeyu3年前 (2024-02-21)170
【Flink 精选】TaskManager 详解 — 架构
TaskManager 架构.jpg 2.TaskManager 的组成模块 TaskManager 包含的模块有JobManager 模块、TaskSlot 管理、资源管理 ResourceManager、心跳检测 HeartbeatManager、存储服务 BlobCacheService。 2...
iseeyu3年前 (2024-02-21)131
帕斯卡尔的概率论
如果你想深刻理解人工智能，大数据算法。概率论必须得懂。如今最火热的科技技术，无非是机器学习。深度学习，大数据喂养。互联网大厂通过海量的数据喂养。就能知道每个用户的行为特征。预测用户明天要做什么事。马云多次提出数据时代。数据就是新时代的石油。在中国的数据显然比美国更多。其实，要理解大数据。就得先知道，...
iseeyu3年前 (2024-02-21)110
统计学方法：主成分分析（PCA）实战
本文重点讨论对降维中常用的统计分析方法之一：主成分分析法。对影响31个城市综合评价的8个指标，用主成分分析法确定8个指标的权重，并使用SPASS和Python两种实战方式进行操作。 前置统计与概论相关知识点 协方差：衡量变量间相对于各自自身期望的变化趋势的统计指标，比如变量X大于自身期望时变量Y也大...
iseeyu3年前 (2024-02-21)205
学习| 思维模型学习——06决策树思维模型
图，网络，侵删 如上图所示，决策树一般由方块结点、方案枝、圆形结点、概率枝四要素组成：方块结点称为决策结点，由结点引出若干条细支，每条细支代表一个方案，称为方案枝；圆形结点称为状态结点，由状态结点引出若干条细支，表示不同的自然状态，称为概率枝。在每条细枝上标明客观状态的内容和其出现概率。概率枝的最末...
iseeyu3年前 (2024-02-21)139
广义线性混合模型（GLMM）
WX20201110-151431.png 以及样本的各种信息sample.info，形如： WX20201110-151645.png 步骤1：多滤掉低丰度数据 #过滤掉物种丰度为0的样本数过多的行 ˃ filter.index ˂- apply(taxa.raw, 1, function(X){...
iseeyu3年前 (2024-02-21)150
OpenGL学习27——伽马校正
Gamma与线性颜色条 上图中，上方颜色条显示的亮度看起来是成比例变化的，双倍的亮度值我们看着的感受也是双倍的亮度变化。但是对于光的物理亮度来说，即离开光源的光子数量，下方颜色条显示的才是正确亮度。但由于我们人眼感知亮度的差异，下方颜色条看起来有点奇怪。正是由于人眼更倾向于根据上方颜色条的比例关系来...
iseeyu3年前 (2024-02-21)186
Keras深度学习——添加网络层Layers
addlayer.jpg 2.1 基础层The Base Layer tf.keras.layers.Layer( trainable=True, name=None, dtype=None, dynamic=False, **kwargs ) Args 参数 trainable 布尔类型，变量是否...
iseeyu3年前 (2024-02-21)153
R语言绘图——数据可视化ggplot2 介绍和主要的参数
1.jpg aes()，颜色、大小、形状和其他审美属性 要向绘图添加其他变量，我们可以使用其他美学，如颜色、形状和大小。 按照属性定义 它们的工作方式与x和y相同，aes()： aes(displ, hwy, colour = class) #按照某个属性着色 aes(displ, hwy, sha...
iseeyu3年前 (2024-02-21)154