Ubuntu TechHive
🚀 Automate LLM Pipelines with Apache Airflow
event.细节
The Ubuntu TechHive

Abidjan, Côte d'Ivoire

🚀 使用 Apache Airflow 实现 LLM 流水线自动化

· 2 小时过去

期待什么

section.描述


欢迎参加我们为期 2 小时的强化研讨会,您将学习如何使用 Apache Airflow 来编排和自动化您的大型语言模型 (LLM) 工作流!

您将学到什么 📚

掌握 Airflow 基础知识 🔧
深入了解 Apache Airflow 的核心概念,包括 DAG、任务 (Tasks)、算子 (Operators) 和传感器 (Sensors)。我们将提供全面的 UI 演练,并演示如何快速进行本地设置,助您立即上手。

构建您的第一个 AI 流水线 🤖
通过亲手实践,我们将共同构建一个简单的 LLM 流水线。您将学习如何实现 OpenAI 文本生成算子、根据 AI 输出创建分支逻辑,并妥善存储结果。我们还将涵盖常见的陷阱和调试策略,为您节省数小时的排错时间。

高级多步骤工作流
观看我们构建一个复杂的文档处理流水线,展示真实的 AI 自动化场景。这包括使用 BashOperator 和 Python 进行 PDF 文本提取、利用 Vertex AI 生成嵌入 (Embedding)、通过 OpenAI 创建摘要,以及向量数据库存储。您将掌握用于无缝数据传递的 XCom 模式,并学习动态任务生成技术。

生产就绪策略 🏗️
了解何时选择批处理而非实时处理(使用 OpenAITriggerBatchOperator),实现使用 CountTokensOperator 进行成本监控,设计稳健的错误处理和重试策略,并探索包括 Ray 集群集成在内的扩展模式。

活动详情 📅

  • 日期: 2025 年 11 月 1 日
  • 时间: 美国东部时间上午 10:30
  • 时长: 2 小时
  • 形式: 互动式在线研讨会,包含问答环节

非常适合数据工程师、MLOps 从业者以及希望简化 AI 工作流的开发人员!

🔗 保持联系: 加入我们充满活力的社区:DiscordWhatsAppLinkedIn,或访问我们的网站

位置.conf

地点

Abidjan, Côte d'Ivoire
在线
详情.yml

详情

日期和时间
2025年十一月1 2:30 PM·UTC
时区
UTC
持续时间
2 小时
主办单位
The Ubuntu TechHive