欢迎光临
我们一直在努力
        找回密码
当前位置：码农资源网 编程技术 Go语言 正文

案例（一）-KisFlow-Golang流实时计算-快速入门指南

2024-07-10 分类：Go语言 阅读(25)

案例（一）-kisflow-golang流实时计算-快速入门指南

Github：https://github.com/aceld/kis-flow
文档：https://github.com/aceld/kis-flow/wiki

第 1 部分-概览
Part2.1-项目构建/基础模块
Part2.2-项目构建/基础模块
第三部分-数据流
Part4-功能调度
第5部分-连接器
Part6-配置导入导出
Part7-KisFlow 动作
Part8-Cache/Params 数据缓存和数据参数
Part9-流程的多份副本
Part10-Prometheus Metrics 统计
Part11-基于反射的FaaS参数类型自适应注册

案例1-快速入门
Case2-流程并行操作
Case3-KisFlow在多Goroutine中的应用

下载 KisFlow 源代码

$前往 github.com/aceld/kis-flow

KisFlow 开发者文档

  1. KisFlow 快速入门（使用配置文件）
    源代码示例：
    kis-flow-usage/2-quick_start_with_config 位于 main · acld/kis-flow-usage

首先，让我们创建一个具有以下文件结构的项目：

项目目录

├── Makefile
├── 会议
│ ├── flow-CalStuAvgScore.yml
│ ├── func-AvgStuScore.yml
│ └── func-PrintStuAvgScore.yml
├── faas_stu_score_avg.go
├── faas_stu_score_avg_print.go
└── main.go

流动

定义当前Flow。目前的Flow名为“CalStuAvgScore”，是一个计算学生平均成绩的数据流。

定义两个函数。 Function1是Calculate，是计算学生平均成绩的逻辑，Function2是Expand，是打印最终结果

立即学习“go语言免费学习笔记（深入）”；

配置

Flow 和 Functions 的配置文件如下：

(1) 流程配置

conf/flow-CalStuAvgScore.yml

kistype：流动
状态：1
flow_name：CalStuAvgScore
流量：
 - 文件名称：AvgStuScore
 - 文件名称：PrintStuAvgScore

(2) 功能1配置

conf/func-AvgStuScore.yml

kistype：功能
文件名称：AvgStuScore
fmode：计算
来源：
 名称： 学生成绩
 必须：
 - 学生ID

(3)功能2配置

conf/func-PrintStuAvgScore.yml

kistype：功能
文件名称：PrintStuAvgScore
fmode：展开
来源：
 名称： 学生成绩
 必须：
 - 学生ID

主要的

接下来是主要逻辑，分为三步：

  • 加载配置文件并获取Flow实例。
  • 提交数据。
  • 运行流程。

main.go

包主

进口 （
    “语境”
    “FMMT”

    “github.com/aceld/kis-flow/file”
    “github.com/aceld/kis-flow/kis”
）

函数主() {
    ctx := context.Background()

    // 从文件加载配置
    if err := file.ConfigImportYaml("conf/");错误！=零{
        恐慌（错误）
    }

    // 获取流量
    flow1 := kis.Pool().GetFlow("CalStuAvgScore")
    如果流 1 == nil {
        恐慌（“流1为零”）
    }

    // 提交字符串
    _ = flow1.CommitRow(`{"stu_id":101, "score_1":100, "score_2":90, "score_3":80}`)
    // 提交字符串
    _ = flow1.CommitRow(`{"stu_id":102, "score_1":100, "score_2":70, "score_3":60}`)

    // 运行流程
    if err := flow1.Run(ctx);错误！=零{
        fmt.Println("错误："，错误)
    }

    返回
}

功能1

第一个计算过程的实现逻辑如下。 AvgStuScoreIn 是输入数据类型，目前包含三个分数，AvgStuScoreOut 是输出数据类型，是平均分数。

faas_stu_score_avg.go

包主
进口 （
    “语境”
    “github.com/aceld/kis-flow/kis”
    “github.com/aceld/kis-flow/serialize”
）

类型 AvgStuScoreIn 结构体 {
    序列化.DefaultSerialize
    StuId int `json:"stu_id"`
    Score1 int `json:"score_1"`
    Score2 int `json:"score_2"`
    Score3 int `json:"score_3"`
}

类型 AvgStuScoreOut 结构体 {
    序列化.DefaultSerialize
    StuId int `json:"stu_id"`
    AvgScore float64 `json:"avg_score"`
}

// AvgStuScore(FaaS) 计算学生的平均成绩
func AvgStuScore(ctx context.Context, flow kis.Flow, rows []*AvgStuScoreIn) error {
    对于 _, row := 范围行 {
        输出 := AvgStuScoreOut{
            StuId：行.StuId，
            平均得分：float64(行.得分1+行.得分2+行.得分3) / 3,
        }
        // 提交结果数据
        _ = flow.CommitRow(out)
    }
    返回零
}

功能2

打印的逻辑是直接打印数据，如下

faas_stu_score_avg_print.go

包主

进口 （
    “语境”
    “FMMT”
    “github.com/aceld/kis-flow/kis”
    “github.com/aceld/kis-flow/serialize”
）

类型 PrintStuAvgScoreIn 结构体 {
    序列化.DefaultSerialize
    StuId int `json:"stu_id"`
    AvgScore float64 `json:"avg_score"`
}

类型 PrintStuAvgScoreOut 结构体 {
    序列化.DefaultSerialize
}

func PrintStuAvgScore(ctx context.Context, flow kis.Flow, rows []*PrintStuAvgScoreIn) error {
    对于 _, row := 范围行 {
        fmt.Printf("stuid: [%+v], 平均成绩: [%+v]n", row.StuId, row.AvgScore)
    }
    返回零
}

输出

最后运行程序，得到如下结果：

添加 KisPool FuncName=AvgStuScore
添加 KisPool FuncName=PrintStuAvgScore
添加 FlowRouter FlowName=CalStuAvgScore
学生：[101]，平均分数：[90]
学习：[102]，平均分数：[76.66666666666667]

2.KisFlow快速入门（使用原生接口，动态配置）

源代码示例：kis-flow-usage/1-quick_start at main · acld/kis-flow-usage

项目目录

├── faas_stu_score_avg.go
├── faas_stu_score_avg_print.go
└── main.go

流动

主要的

main.go

包主

进口 （
    “语境”
    “FMMT”
    “github.com/aceld/kis-flow/common”
    “github.com/aceld/kis-flow/config”
    “github.com/aceld/kis-flow/flow”
    “github.com/aceld/kis-flow/kis”
）

函数主() {
    ctx := context.Background()

    // 创建新的流配置
    myFlowConfig1 := config.NewFlowConfig("CalStuAvgScore", common.FlowEnable)

    // 创建新的函数配置
    avgStuScoreConfig := config.NewFuncConfig("AvgStuScore", common.C, nil, nil)
    printStuScoreConfig := config.NewFuncConfig("PrintStuAvgScore", common.E, nil, nil)

    // 创建一个新流
    flow1 := flow.NewKisFlow(myFlowConfig1)

    // 将函数链接到流程
    _ = flow1.Link(avgStuScoreConfig, nil)
    _ = flow1.Link(printStuScoreConfig, nil)

    // 提交字符串
    _ = flow1.CommitRow(`{"stu_id":101, "score_1":100, "score_2":90, "score_3":80}`)
    // 提交字符串
    _ = flow1.CommitRow(`{"stu_id":102, "score_1":100, "score_2":70, "score_3":60}`)

    // 运行流程
    if err := flow1.Run(ctx);错误！=零{
        fmt.Println("错误："，错误)
    }

    返回
}

函数初始化（）{
    // 注册函数
    kis.Pool().FaaS("AvgStuScore", AvgStuScore)
    kis.Pool().FaaS("PrintStuAvgScore", PrintStuAvgScore)
}

功能1

faas_stu_score_avg.go

包主

进口 （
    “语境”
    “github.com/aceld/kis-flow/kis”
    “github.com/aceld/kis-flow/serialize”
）

类型 AvgStuScoreIn 结构体 {
    序列化.DefaultSerialize
    StuId int `json:"stu_id"`
    Score1 int `json:"score_1"`
    Score2 int `json:"score_2"`
    Score3 int `json:"score_3"`
}

类型 AvgStuScoreOut 结构体 {
    序列化.DefaultSerialize
    StuId int `json:"stu_id"`
    AvgScore float64 `json:"avg_score"`
}

// AvgStuScore(FaaS) 计算学生的平均成绩
func AvgStuScore(ctx context.Context, flow kis.Flow, rows []*AvgStuScoreIn) error {
    对于 _, row := 范围行 {

        输出 := AvgStuScoreOut{
            StuId：行.StuId，
            平均得分：float64(行.得分1+行.得分2+行.得分3) / 3,
        }

        // 提交结果数据
        _ = flow.CommitRow(out)
    }

    返回零
}

功能2

faas_stu_score_avg_print.go

包主

进口 （
    “语境”
    “FMMT”
    “github.com/aceld/kis-flow/kis”
    “github.com/aceld/kis-flow/serialize”
）

类型 PrintStuAvgScoreIn 结构 {
    序列化.DefaultSerialize
    StuId int `json:"stu_id"`
    AvgScore float64 `json:"avg_score"`
}

类型 PrintStuAvgScoreOut 结构体 {
    序列化.DefaultSerialize
}

func PrintStuAvgScore(ctx context.Context, flow kis.Flow, rows []*PrintStuAvgScoreIn) error {
    对于 _, row := 范围行 {
        fmt.Printf("stuid: [%+v], 平均成绩: [%+v]n", row.StuId, row.AvgScore)
    }

    返回零
}

输出

添加 KisPool FuncName=AvgStuScore
添加 KisPool FuncName=PrintStuAvgScore
funcName NewConfig 源为零，funcName = AvgStuScore，使用默认的未命名源。
funcName NewConfig 源为零，funcName = PrintStuAvgScore，使用默认的未命名源。
学生：[101]，平均分数：[90]
学习：[102]，平均分数：[76.66666666666667]

作者：Aceld
GitHub：https://github.com/aceld

KisFlow 开源项目地址：https://github.com/aceld/kis-flow

文档：https://github.com/aceld/kis-flow/wiki

第 1 部分-概览
Part2.1-项目构建/基础模块
Part2.2-项目构建/基础模块
第三部分-数据流
Part4-功能调度
第5部分-连接器
Part6-配置导入导出
Part7-KisFlow 动作
Part8-Cache/Params 数据缓存和数据参数
Part9-流程的多份副本
Part10-Prometheus Metrics 统计
Part11-基于反射的FaaS参数类型自适应注册

案例1-快速入门
Case2-Flow并行运行
Case3-KisFlow在多Goroutine中的应用

赞(0) 打赏
未经允许不得转载：码农资源网 » 案例（一）-KisFlow-Golang流实时计算-快速入门指南
分享到

相关推荐

推荐文章

最新文章

觉得文章有用就打赏一下文章作者

非常感谢你的打赏，我们将继续提供更多优质内容，让我们一起创建更加美好的网络世界！

支付宝扫一扫打赏

微信扫一扫打赏

登录

找回密码

注册