

基于Hadoop3.3.4+Flink1.17.0+FlinkCDC3.0.0+Iceberg1.5.0整合,实现数仓实时同步mysql数据
本文详细介绍了Hadoop 3.3.4和Flink 1.17.0的安装部署流程,并整合了Flink CDC 3.0.0与Iceberg 1.5.0。主要内容包括:1)Hadoop集群部署,包括环境准备、配置、分布式部署及启动验证;2)Flink安装及与Hadoop集成,配置YARN模式运行;3)Flink CDC 3.0.0连接器安装,实现MySQL数据变更捕获;4)Iceberg 1.5.0集成,配置Hadoop Catalog存储数据;5)完整示例展示如何通过SQL实现MySQL到Iceberg的实时数

【论文阅读+复现】LayoutDM: Transformer-based Diffusion Model for Layout Generation
自动化高质量布局生成。虽然用生成对抗网络(GANs)和变分自编码器(VAEs)已经有不少进展,但GAN的多样性和分布覆盖有限、VAE生成质量又不够高。作者受扩散模型(Diffusion Models)在高质量图像生成领域的成功启发,提出将条件扩散模型(Conditional DDPM)与纯Transformer架构结合,创造出LayoutDM模型,用于条件布局生成。LayoutDM既继承了transformer建模复杂关系的优势,也利用了DDPM的高分布覆盖及稳定训练目标,比GAN/VAE更优秀。

