前几天在推特刷屏的基于LCM和SDXL Turbo每秒生成110张图像的项目居然开源了, 有想做相关实时图像生成产品的可以关注一下。
StreamDiffusion是一种扩散模型管道,主要是为了实时图像生成服务的,为实时图像生成提供了显著的性能增强。
支持的模型和输出帧率:
◆SD-turbo,1步,t2i每秒帧率106,i2i每秒帧率93。
◆LCM-LoRA+KohakuV2,4步,t2i每秒帧率38,i2i每秒帧率37。
主要特点:
◆通过高效的批处理操作实现了数据处理的流程优化。
◆改进的指导机制可以最大程度地减少计算冗余。
◆通过先进的过滤技术提高GPU利用效率。
◆有效管理输入和输出操作,以实现更顺畅的执行。
◆优化缓存策略以加速处理。
◆利用各种工具进行模型优化和性能提升。
项目地址:https://t.co/tozvMCF6pN