2024-06-27 comfyui企业级应用遇到的问题

comfyui:通过工作流创建任务,完成任务。常用于文生图,图生图,文生视频,图生视频,图片,视频风格迁移,换脸,高清化,。各种功能需要对应的模型及插件实现。
api: comfyapi提供功能包含:system_info(系统状态),get prompt(查询当前任务数),post prompt(提交任务),history(查询完成任务详情(如果未完成返回空对象))
企业级应用面临的挑战:
可用性,可扩展性,高并发,安全性,合规性,国际化。
comfyui 单节点:同时只能运行一个任务,在执行任务期间,新增的任务会自动添加到任务队列。由于某型模型在特殊参数下会占用大量算力资源,可能会造成服务崩溃,存在任务丢失系统不可用的隐患。

comfyui集群:comfyui集群可以很好的解决高并发,可用性问题。但由于comfyui的任务都是异步任务,给扩展性带来了几点挑战。
1.当一个任务提交到某个节点,可后续如果查询到另外的节点则会查不到任务。


任务不同步.png
  1. 当任务量突增后又开始骤减,集群节点的伸缩也是问题,可能出现某老节点存在大量任务堆积,但新节点只能分配个别任务。合适的扩缩容器时机也难以把控。


    伸缩.png
  2. 在集群扩容时,启动速度也是要关注的地方,由于comfyui中的很多模型占用很大的存储空间,如果启动机器后一一下载可能花费数十分钟,这样不但占用带宽,而且等容器启动正常工作,可能原节点组已经积压大量任务。


    启动ing.png
  3. 任务分配问题,comfyui使用sd模型制作一张简单的文生图可能需要1-3s,但是如果制作图片生成视频,视频生成视频,受分辨率,视频时长,帧率影响,可能要几分钟甚至数十分钟,如果将耗时任务和非耗时任务统一在相同集群执行可能造成非耗时用户难以接受。


    queueTime.png
  4. 工作流管理,不同的效果需要不同的工作流json。 随着技术的改进,部分模型,工作流程也会发生变化,在多人开发环境下工作流管理会开始变的混乱。


    image.png
©著作权归作者所有,转载或内容合作请联系作者
  • 序言:七十年代末,一起剥皮案震惊了整个滨河市,随后出现的几起案子,更是在滨河造成了极大的恐慌,老刑警刘岩,带你破解...
    沈念sama阅读 218,941评论 6 508
  • 序言:滨河连续发生了三起死亡事件,死亡现场离奇诡异,居然都是意外死亡,警方通过查阅死者的电脑和手机,发现死者居然都...
    沈念sama阅读 93,397评论 3 395
  • 文/潘晓璐 我一进店门,熙熙楼的掌柜王于贵愁眉苦脸地迎上来,“玉大人,你说我怎么就摊上这事。” “怎么了?”我有些...
    开封第一讲书人阅读 165,345评论 0 356
  • 文/不坏的土叔 我叫张陵,是天一观的道长。 经常有香客问我,道长,这世上最难降的妖魔是什么? 我笑而不...
    开封第一讲书人阅读 58,851评论 1 295
  • 正文 为了忘掉前任,我火速办了婚礼,结果婚礼上,老公的妹妹穿的比我还像新娘。我一直安慰自己,他们只是感情好,可当我...
    茶点故事阅读 67,868评论 6 392
  • 文/花漫 我一把揭开白布。 她就那样静静地躺着,像睡着了一般。 火红的嫁衣衬着肌肤如雪。 梳的纹丝不乱的头发上,一...
    开封第一讲书人阅读 51,688评论 1 305
  • 那天,我揣着相机与录音,去河边找鬼。 笑死,一个胖子当着我的面吹牛,可吹牛的内容都是我干的。 我是一名探鬼主播,决...
    沈念sama阅读 40,414评论 3 418
  • 文/苍兰香墨 我猛地睁开眼,长吁一口气:“原来是场噩梦啊……” “哼!你这毒妇竟也来了?” 一声冷哼从身侧响起,我...
    开封第一讲书人阅读 39,319评论 0 276
  • 序言:老挝万荣一对情侣失踪,失踪者是张志新(化名)和其女友刘颖,没想到半个月后,有当地人在树林里发现了一具尸体,经...
    沈念sama阅读 45,775评论 1 315
  • 正文 独居荒郊野岭守林人离奇死亡,尸身上长有42处带血的脓包…… 初始之章·张勋 以下内容为张勋视角 年9月15日...
    茶点故事阅读 37,945评论 3 336
  • 正文 我和宋清朗相恋三年,在试婚纱的时候发现自己被绿了。 大学时的朋友给我发了我未婚夫和他白月光在一起吃饭的照片。...
    茶点故事阅读 40,096评论 1 350
  • 序言:一个原本活蹦乱跳的男人离奇死亡,死状恐怖,灵堂内的尸体忽然破棺而出,到底是诈尸还是另有隐情,我是刑警宁泽,带...
    沈念sama阅读 35,789评论 5 346
  • 正文 年R本政府宣布,位于F岛的核电站,受9级特大地震影响,放射性物质发生泄漏。R本人自食恶果不足惜,却给世界环境...
    茶点故事阅读 41,437评论 3 331
  • 文/蒙蒙 一、第九天 我趴在偏房一处隐蔽的房顶上张望。 院中可真热闹,春花似锦、人声如沸。这庄子的主人今日做“春日...
    开封第一讲书人阅读 31,993评论 0 22
  • 文/苍兰香墨 我抬头看了看天上的太阳。三九已至,却和暖如春,着一层夹袄步出监牢的瞬间,已是汗流浃背。 一阵脚步声响...
    开封第一讲书人阅读 33,107评论 1 271
  • 我被黑心中介骗来泰国打工, 没想到刚下飞机就差点儿被人妖公主榨干…… 1. 我叫王不留,地道东北人。 一个月前我还...
    沈念sama阅读 48,308评论 3 372
  • 正文 我出身青楼,却偏偏与公主长得像,于是被迫代替她去往敌国和亲。 传闻我的和亲对象是个残疾皇子,可洞房花烛夜当晚...
    茶点故事阅读 45,037评论 2 355

推荐阅读更多精彩内容