0
  • 聊天消息
  • 系统消息
  • 评论与回复
登录后你可以
  • 下载海量资料
  • 学习在线课程
  • 观看技术视频
  • 写文章/发帖/加入社区
会员中心
创作中心

完善资料让更多小伙伴认识你,还能领取20积分哦,立即完善>

3天内不再提示

workflow:适合C++开发者进阶的开源项目

嵌入式学习站 来源:嵌入式学习站 作者:嵌入式学习站 2022-11-25 16:28 次阅读

今天分享一个适合C++开发者进阶的开源项目,这个项目的名字叫workflow,项目地址如下:https://github.com/sogou/workflow

a4c940ae-6b11-11ed-8abf-dac502259ad0.png

项目适用场景

该项目是搜狗的服务器引擎,几乎搜狗所有的后端C++服务和其他几十家公司都在使用这个引擎,每日处理超百亿请求。

不仅如此,该项目也非常适合在嵌入式应用上实现网络的框架设计,框架设计是一个项目成功与否非常重要的环节,而网络在AIOT、智能家居智能硬件上尤其重要。

比如在项目中需要使用http,Workflow在设计上可以通过Cmake配置支持windows 或者 Linux 或 MacOS 等多个平台上的多个项目编译,而且,可以在不同平台上保持相同的接口

如果你新增一个嵌入式设备,比如ESP32,在服务器和客户端只需要维护一套代码,就可以完成自己的应用需求。

真正做到把云端的技术移植到嵌入式设备上运行。

适用于嵌入式几大特点:

1、支持多平台、多体系结构

多平台的代码说明在配置和耦合上考虑了很多设计上的细节。⽬前Workflow除了Linux、Windows、MacOS、Android以外,还可以愉快地在树莓派、国产⻰芯处理器等不同体系结构上运⾏。

2、编译快

Workflow除OpenSSL以外不依赖其他库,⽽且在接口层是没有模版的,因此编译速度⾮常快,不到一分钟即可编出一个可⽤的lib。

3、体积小、支持编译剪裁

Workflow的Kafka协议默认是不编译的,除此之外,还可以裁剪掉其他不常⽤的模块。

并且可以通过strip命令去掉符号链接,即可让库⽂件缩⼩到400k左右。

4、运行时内存小、调度快

作为一个异步调度的库,Workflow调度性能一直是⾮常好的。另外运⾏时内存占⽤也⾮常的小。

5、自定义协议非常方便

社区活跃以及项目负责人积极回复问题也是一个亮点,如果在框架搭建和移植上出现问题,在社区上提问都会得到快速响应。

a506848c-6b11-11ed-8abf-dac502259ad0.png

移植到嵌入式设备的开源支持

据悉⽬前已经有许多⽤户⽤到了嵌⼊式上了。github官方也做出了耐心的解释。

a5246c5e-6b11-11ed-8abf-dac502259ad0.png

框架能做什么

1、轻松的搭建server

不用多说,服务端框架如果不能搭建server那还玩啥了,但使用这个框架非常方便,以http server为例,只需要简单几行代码即可:

#include #include "workflow/WFHttpServer.h" int main() { WFHttpServer server([](WFHttpTask *task) { task->get_resp()->append_output_body("Hello World!"); }); if (server.start(8888) == 0) { // start server on port 8888 getchar(); // press "Enter" to end. server.stop(); } return 0; }

2、轻松高效的发起客户端请求

项目号称可作为万能异步客户端,目前支持http,redis,mysql、websocket和kafka协议,下面是官方给出的一个mysql的客户端示例:

int main(int argc, char *argv[]) { ... WFMySQLTask *task = WFTaskFactory::create_mysql_task(url, RETRY_MAX, mysql_callback); task->get_req()->set_query("SHOW TABLES;"); ... task->start(); ... }

以往的C++ server需要访问mysql时,可能使用的是传统的客户端。在一个线程下以同步阻塞的方式等待数据到来。如果有多个网络请求希望并发,那么用户需要管理好多个mysql cli对象。

workflow完美的解决了这一系列问题,把所有这种用户请求交给内部的poller线程统一管理,实现了高效的非阻塞IO行为,提升了server作为客户端请求数据时的性能表现。再也不用担心这种客户端行为影响server整体的性能。

支持自定义协议client/server:用户可构建自己的RPC系统,搜狗有个开源项目srpc就是以这个框架为基础实现的。

3、可建构异步任务流

支持串联,支持并联,支持串并联的组合体,也支持复杂的DAG结构。

4、异步IO

在Linux系统下可作为文件异步IO工具使用,性能超过任何标准调用。

5、通信与计算一体化

多数框架都着重于网络IO的效率问题,而计算与任务调度等需要用户自己实现,workflow会自动对任务进行调度,打通网络和磁盘等资源,特别适合需要网络通信的重计算模块。

任务流框架设计

在作者的设计理念中,一切业务逻辑皆是任务,多个任务会组成任务流,任务流可组成图,这个图可能是串联图、并联图,也可能是串并联图,类似于这种:

a5513f72-6b11-11ed-8abf-dac502259ad0.png

或者是这种复杂的DAG图:

a589510a-6b11-11ed-8abf-dac502259ad0.png

当然图的层次结构可由用户自定义,很牛的一点是支持动态创建任务流。

分享结束,希望小伙伴喜欢,嵌入式真需要不断学习去充实自己的大脑,相信你们都能够成为最厉害的程序员

最近很多小伙伴领取了程序员知识图谱,反馈很好。我们知道每一个技术领域都有它完整地知识体系,而良好的知识体系有助于技术人员的发展和成长,减少学习过程中所走的弯路。所以还没有领取的小伙伴赶紧领取起来吧!(底部有领取入口哦)

声明:本文内容及配图由入驻作者撰写或者入驻合作网站授权转载。文章观点仅代表作者本人,不代表电子发烧友网立场。文章及其配图仅供工程师学习之用,如有内容侵权或者其他违规问题,请联系本站处理。 举报投诉
  • 嵌入式
    +关注

    关注

    5082

    文章

    19123

    浏览量

    305158
  • C++
    C++
    +关注

    关注

    22

    文章

    2108

    浏览量

    73648
  • workflows
    +关注

    关注

    0

    文章

    6

    浏览量

    5927

原文标题:分享一个适合嵌入式的C++开源项目-Workflow

文章出处:【微信号:嵌入式学习站,微信公众号:嵌入式学习站】欢迎添加关注!文章转载请注明出处。

收藏 人收藏

    评论

    相关推荐

    普华基础软件亮相2024开放原子开发者大会

    近日,以“一切为了开发者”为主题的“2024开放原子开发者大会暨首届开源技术学术大会”在武汉举办。普华基础软件作为开放原子开源基金会开源生态
    的头像 发表于 12-24 14:32 135次阅读

    我国软件开发者数量突破940万

    2024开放原子开发者大会20到21日在武汉举办。工业和信息化部负责人透露,我国软件开发者数量突破940万。 开源就是开放软件的源代码,在遵守许可协议的前提下,任何人都可以使用、修改甚至再发布源代码
    的头像 发表于 12-24 13:52 93次阅读

    2024开放原子开发者大会暨首届开源技术学术大会成功举办

    近日,以“一切为了开发者”为主题的2024开放原子开发者大会暨首届开源技术学术大会在武汉成功举办。大会为众多开源项目
    的头像 发表于 12-23 14:23 118次阅读

    软通动力与鸿湖万联亮相2024开放原子开发者大会

    12月20日至21日,由开放原子开源基金会、中国通信学会主办的2024开放原子开发者大会暨首届开源技术学术大会在武汉盛大召开。大会以“一切为了开发者”为主题,旨在贯彻落实国家软件发展战
    的头像 发表于 12-23 13:53 101次阅读

    2024年度国内活跃开源项目开发者在武汉揭晓

    近日,2024年度国内活跃开源项目&开发者致谢仪式,亮相2024开放原子开发者大会暨首届开源技术学术大会开幕式。
    的头像 发表于 12-23 11:25 193次阅读

    2024开放原子开发者大会启幕,深开鸿助力开源产业创新发展

    12月20日-21日,以“一切为了开发者”为主题的“2024开放原子开发者大会暨首届开源技术学术大会”在武汉隆重召开。本届大会由开放原子开源基金会、中国通信学会主办,旨在贯彻落实国家软
    的头像 发表于 12-20 18:34 140次阅读
    2024开放原子<b class='flag-5'>开发者</b>大会启幕,深开鸿助力<b class='flag-5'>开源</b>产业创新发展

    高校开源开发者培养分论坛亮点前瞻

    数字化时代,开源成为了全球软件与技术创新的重要驱动力,从Linux操作系统到Android移动平台,从人工智能框架到云计算基础设施,一个个开源项目遍地开花。然而,在开源蓬勃发展的背后,
    的头像 发表于 12-17 14:06 142次阅读

    简仪科技第九届开源测控开发者大会精彩回顾

    由简仪科技主办的第九届开源测控开发者大会,近日在上海圆满落幕。
    的头像 发表于 11-19 09:16 323次阅读

    开源共生 商业共赢 | RT-Thread 2024开发者大会报名启动!

    开发者大会将以“开源共生,商业共赢”为主题,将于2024年12月21日全天在上海临港中心举行。开源RT-Thread如何实现商业化?这一直是外界对RT-Thread最
    的头像 发表于 10-29 08:06 395次阅读
    <b class='flag-5'>开源</b>共生 商业共赢 | RT-Thread 2024<b class='flag-5'>开发者</b>大会报名启动!

    简仪科技与您相约第九届开源测控开发者大会

    第九届开源测控开发者大会,简仪科技将继续秉承开放、创新的精神,深入探讨模块测控领域软件的重要性,并展示基于开源锐视测控平台的实践应用,带来丰富的议题分享。
    的头像 发表于 10-21 11:35 483次阅读

    KaihongOS 4.1.2开发者预览版正式上线,诚邀开发者免费试用!

    深开鸿在2024开放原子开源生态大会上正式宣布KaihongOS4.1.2开发者预览版全面上线,并向全球开发者开放免费下载。作为KaihongOS不断创新与发展的重要里程碑,此次预览版为开发者
    的头像 发表于 09-28 08:07 336次阅读
    KaihongOS 4.1.2<b class='flag-5'>开发者</b>预览版正式上线,诚邀<b class='flag-5'>开发者</b>免费试用!

    OpenVINO™ C++ 在哪吒开发板上推理 Transformer 模型|开发者实战

    使用OpenVINO定制你的AI助手丨开发者实战作者:王国强苏州嘉树医疗科技有限公司算法工程师指导:颜国进英特尔边缘计算创新大使研扬科技针对边缘AI行业开发者推出的『哪吒』(Nezha)开发套件,以
    的头像 发表于 09-28 08:01 345次阅读
    OpenVINO™ <b class='flag-5'>C++</b> 在哪吒<b class='flag-5'>开发</b>板上推理 Transformer 模型|<b class='flag-5'>开发者</b>实战

    KaihongOS 4.1.2开发者预览版正式上线,诚邀开发者免费试用!

    今日,深开鸿在2024开放原子开源生态大会上正式宣布KaihongOS 4.1.2开发者预览版全面上线,并向全球开发者开放免费下载。作为KaihongOS不断创新与发展的重要里程碑,此次预览版为
    的头像 发表于 09-26 15:59 456次阅读

    软通动力助阵OpenHarmony开发者大会2024成功举办

    近日,由开放原子开源基金会OpenHarmony项目群工作委员会主办的OpenHarmony开发者大会2024在深圳成功举办。
    的头像 发表于 05-28 09:35 703次阅读
    软通动力助阵OpenHarmony<b class='flag-5'>开发者</b>大会2024成功举办

    华为宣布HarmonyOS NEXT鸿蒙星河版开发者预览面向开发者开放申请

    华为宣布HarmonyOS NEXT鸿蒙星河版开发者预览面向开发者开放申请,这意味着鸿蒙生态进入第二阶段,将加速千行百业的应用鸿蒙化。
    的头像 发表于 01-29 16:42 1416次阅读
    华为宣布HarmonyOS NEXT鸿蒙星河版<b class='flag-5'>开发者</b>预览面向<b class='flag-5'>开发者</b>开放申请