Windmill:快速自托管的开源工作流引擎 比Airflow快10倍!
要点:
Windmill经过基准测试,被证明是最快速的自托管通用工作流引擎,比Airflow、Prefect甚至Temporal都快,最高可达10倍速度提升。
Windmill的速度得益于其简单的设计、优化的系统架构以及对Postgresql和Rust的充分利用。
与其他自托管工作流引擎相比,Windmill具有更广泛的语言支持(Typescript/Javascript、Python、Go、Bash和直接SQL查询),并提供易于使用的开发体验。
Windmill是一款快速的自托管开源工作流引擎,经过基准测试证明在速度上超越了Airflow、Prefect甚至Temporal,最高可达10倍的性能提升。这一成就得益于Windmill的系统设计和架构,以及对Postgresql和Rust的充分利用。相较于其他自托管工作流引擎,Windmill的语言支持更广泛,包括Typescript/Javascript、Python、Go、Bash以及直接的SQL查询。此外,Windmill提供了与其他引擎不同的开发体验,通过集成的开发环境,使得工作流的构建和测试变得简单快捷。
项目地址:https://github.com/windmill-labs/windmill
Windmill在工作流引擎中的高效性体现在三个方面:计算过渡的效率、数据传递的效率和工作节点的效率。在计算过渡方面,Windmill使用了简单而优化的设计,充分利用Postgresql和Rust,通过直接的Postgresql语句实现状态转换,实现了高效的计算过渡。数据传递方面,Windmill提供了三种主要的数据传递方式,包括通过Javascript表达式、预计算输入和通过s3进行数据传递。工作节点的效率得益于Windmill的简单设计和优化的系统架构,使其能够在非容器化的情况下运行,避免了容器带来的性能开销。
Windmill的快速性不仅体现在计算过渡和数据传递方面,还表现在工作节点的高效性上。普通模式下,Windmill的工作节点按顺序处理每个作业,根据作业的语言类型(Python、Typescript、Go、Bash等)启动相应的运行时,并运行作业。此外,Windmill引入了专门的工作节点,专门用于处理脚本和流程,通过预热进程的方式消除了冷启动的开销,使得Windmill在处理高频率作业时表现出色,每秒可处理1000个步骤。
综合来看,Windmill之所以成为最快速的自托管通用工作流引擎,既得益于其系统设计和架构,又得益于对Postgresql和Rust的充分利用。Windmill通过简单而高效的设计,在计算过渡、数据传递和工作节点的各个方面实现了优化,为用户提供了卓越的性能和开发体验。
OpenAl官方API接口出现异常 官方回应:正在修复此问题
今日早间,有开发者以及网友反馈称OpenAl官方的API接口出现了异常,部分使用OpenAl官方接口的应用和插件暂时无法使用。同时,部分用户在使用ChatGPT时也受到了影响。对此,OpenAl在官网回应称,目前正在继续修复此问题。经过测试,目前微软的AzureOpenAI接口暂时不受影响。站长网2023-10-20 09:30:1500006000部短剧的名字里,写着中国人最隐秘的欲望
在争夺注意力的现代内容战争中,名称总是那颗最先上膛的子弹。论吸睛程度,公众号领域的神枪手被大众称作“标题党”,网文圈的佼佼者则被同行半嫉妒半鄙夷地归入“飞卢风”,轻小说界的取名范例更是催生了破圈传播的著名句式——关于我非要取这么长的标题博眼球这件事。图源备注:图片由AI生成,图片授权服务商Midjourney站长网2024-03-09 18:00:140000B站2023最美的夜跨年晚会官宣 将于 12 月 31 日 举行
今天,B站2023年跨晚阵容终于全部官宣,将于12月31日20:00举行,用户可以上B站搜索“2023最美的夜”预约直播。据悉本次跨年晚会来自二次元的嘉宾包括了:红楼梦、猫和老鼠、蜘蛛侠、奥特曼、葫芦兄弟、猪猪侠、铠甲勇士、洛天依、王者荣耀等热门IP角色。站长网2023-12-25 18:52:310000人工智能,绑架了我的声音
「AI」是2023年开年来最热门的话题,当人们为人工智能的崛起而感到兴奋之时,一场危机也随之而来。在过去几个月时间里,我们见识到了「AI问答」、「AI制图」和「AI换脸」,每一项技术的曝光,都引起不小的讨论。在设想「AI」成为我们的得力助手之前,这些工具已经率先成了不法之徒的「好伙伴」。站长网2023-05-10 09:36:030000Meta首席AI研究员指出OpenAI和DeepMind对AI看法过于乐观
🔍划重点:1.Meta的AI首席研究员YannLeCun警告称,过早的AI监管可能会强化科技巨头的主导地位,抑制竞争。他强烈支持开放源代码的AI开发,认为这有助于促进竞争并使更多人能够访问AI技术。2.LeCun认为,当前的AI被高估了,但他也强调了未来更强大的AI系统可能带来的潜在好处,如解决气候变化和疾病控制等挑战。他相信AI必将在大多数领域超越人类智能。站长网2023-10-20 10:12:220000