Ubuntu TechHive
ЁЯЪА Automate LLM Pipelines with Apache Airflow
event.рд╡рд┐рд╡рд░рдг
The Ubuntu TechHive North America

Atlanta, Georgia, USA

ЁЯЪА Apache Airflow рдХреЗ рд╕рд╛рде LLM рдкрд╛рдЗрдкрд▓рд╛рдЗрдиреЛрдВ рдХреЛ рд╕реНрд╡рдЪрд╛рд▓рд┐рдд рдХрд░реЗрдВ

· 2 рдШрдВрдЯреЗрдЕрддреАрдд

рдХреНрдпрд╛ рдЙрдореНрдореАрдж рдХрд░реЗрдВ

section.рд╡рд┐рд╡рд░рдг


рд╣рдорд╛рд░реЗ рд╕рд╛рде 2 рдШрдВрдЯреЗ рдХреА рдПрдХ рдЧрд╣рди рдХрд╛рд░реНрдпрд╢рд╛рд▓рд╛ (рд╡рд░реНрдХрд╢реЙрдк) рдореЗрдВ рд╢рд╛рдорд┐рд▓ рд╣реЛрдВ, рдЬрд╣рд╛рдБ рдЖрдк Apache Airflow рдХрд╛ рдЙрдкрдпреЛрдЧ рдХрд░рдХреЗ рдЕрдкрдиреЗ рд▓рд╛рд░реНрдЬ рд▓реИрдВрдЧреНрд╡реЗрдЬ рдореЙрдбрд▓ (LLM) рд╡рд░реНрдХрдлрд╝реНрд▓реЛ рдХреЛ рд╡реНрдпрд╡рд╕реНрдерд┐рдд рдФрд░ рд╕реНрд╡рдЪрд╛рд▓рд┐рдд рдХрд░рдирд╛ рд╕реАрдЦреЗрдВрдЧреЗ!

рдЖрдк рдХреНрдпрд╛ рд╕реАрдЦреЗрдВрдЧреЗ ЁЯУЪ

Airflow рдХреЗ рдореВрд▓ рд╕рд┐рджреНрдзрд╛рдВрддреЛрдВ рдореЗрдВ рдорд╣рд╛рд░рдд рд╣рд╛рд╕рд┐рд▓ рдХрд░реЗрдВ ЁЯФз
Apache Airflow рдХреА рдореБрдЦреНрдп рдЕрд╡рдзрд╛рд░рдгрд╛рдУрдВ рдЬреИрд╕реЗ DAGs, Tasks, Operators рдФрд░ Sensors рдХреЗ рдмрд╛рд░реЗ рдореЗрдВ рдЧрд╣рд░рд╛рдИ рд╕реЗ рдЬрд╛рдиреЗрдВред рд╣рдо рдЖрдкрдХреЛ UI рдХрд╛ рд╡рд┐рд╕реНрддреГрдд рд╡рд┐рд╡рд░рдг рджреЗрдВрдЧреЗ рдФрд░ рддреБрд░рдВрдд рд╢реБрд░реБрдЖрдд рдХрд░рдиреЗ рдХреЗ рд▓рд┐рдП рдПрдХ рддреНрд╡рд░рд┐рдд рд▓реЛрдХрд▓ рд╕реЗрдЯрдЕрдк рдХрд╛ рдкреНрд░рджрд░реНрд╢рди рдХрд░реЗрдВрдЧреЗред

рдЕрдкрдирд╛ рдкрд╣рд▓рд╛ AI рдкрд╛рдЗрдкрд▓рд╛рдЗрди рдмрдирд╛рдПрдВ ЁЯдЦ
рд╣рдорд╛рд░реЗ рд╕рд╛рде рдПрдХ рд╕рд░рд▓ LLM рдкрд╛рдЗрдкрд▓рд╛рдЗрди рдХрд╛ рдирд┐рд░реНрдорд╛рдг рдХрд░рддреЗ рд╣реБрдП рд╡реНрдпрд╛рд╡рд╣рд╛рд░рд┐рдХ рдЕрдиреБрднрд╡ рдкреНрд░рд╛рдкреНрдд рдХрд░реЗрдВред рдЖрдк OpenAI рдЯреЗрдХреНрд╕реНрдЯ рдЬрдирд░реЗрд╢рди рдСрдкрд░реЗрдЯрд░реНрд╕ рдХреЛ рд▓рд╛рдЧреВ рдХрд░рдирд╛, AI рдЖрдЙрдЯрдкреБрдЯ рдХреЗ рдЖрдзрд╛рд░ рдкрд░ рдмреНрд░рд╛рдВрдЪрд┐рдВрдЧ рд▓реЙрдЬрд┐рдХ рдмрдирд╛рдирд╛ рдФрд░ рдЕрдкрдиреЗ рдкрд░рд┐рдгрд╛рдореЛрдВ рдХреЛ рд╕рд╣реА рдврдВрдЧ рд╕реЗ рд╕реНрдЯреЛрд░ рдХрд░рдирд╛ рд╕реАрдЦреЗрдВрдЧреЗред рд╣рдо рд╕рд╛рдорд╛рдиреНрдп рдЧрд▓рддрд┐рдпреЛрдВ рдФрд░ рдбрд┐рдмрдЧрд┐рдВрдЧ рд░рдгрдиреАрддрд┐рдпреЛрдВ рдХреЛ рднреА рдХрд╡рд░ рдХрд░реЗрдВрдЧреЗ рддрд╛рдХрд┐ рдЖрдкрдХрд╛ рдШрдВрдЯреЛрдВ рдХрд╛ рд╕рдордп рдмрдЪ рд╕рдХреЗред

рдЙрдиреНрдирдд рдорд▓реНрдЯреА-рд╕реНрдЯреЗрдк рд╡рд░реНрдХрдлрд╝реНрд▓реЛ тЪб
рджреЗрдЦреЗрдВ рдХрд┐ рд╣рдо рдХреИрд╕реЗ рдПрдХ рдкрд░рд┐рд╖реНрдХреГрдд рджрд╕реНрддрд╛рд╡реЗрдЬрд╝ рдкреНрд░рд╕рдВрд╕реНрдХрд░рдг рдкрд╛рдЗрдкрд▓рд╛рдЗрди рдмрдирд╛рддреЗ рд╣реИрдВ рдЬреЛ рд╡рд╛рд╕реНрддрд╡рд┐рдХ рджреБрдирд┐рдпрд╛ рдХреЗ AI рд╕реНрд╡рдЪрд╛рд▓рди рдХреЛ рдкреНрд░рджрд░реНрд╢рд┐рдд рдХрд░рддреА рд╣реИред рдЗрд╕рдореЗрдВ BashOperator рдФрд░ Python рдХрд╛ рдЙрдкрдпреЛрдЧ рдХрд░рдХреЗ PDF рдЯреЗрдХреНрд╕реНрдЯ рдПрдХреНрд╕рдЯреНрд░реИрдХреНрд╢рди, Vertex AI рдХреЗ рд╕рд╛рде рдПрдореНрдмреЗрдбрд┐рдВрдЧ рдЬрдирд░реЗрд╢рди, OpenAI рдХреЗ рдорд╛рдзреНрдпрдо рд╕реЗ рд╕рд╛рд░рд╛рдВрд╢ рдирд┐рд░реНрдорд╛рдг рдФрд░ рд╡реЗрдХреНрдЯрд░ рдбреЗрдЯрд╛рдмреЗрд╕ рд╕реНрдЯреЛрд░реЗрдЬ рд╢рд╛рдорд┐рд▓ рд╣реИред рдЖрдк рдирд┐рд░реНрдмрд╛рдз рдбреЗрдЯрд╛ рдкрд╛рд╕рд┐рдВрдЧ рдХреЗ рд▓рд┐рдП XCom рдкреИрдЯрд░реНрди рдореЗрдВ рдорд╣рд╛рд░рдд рд╣рд╛рд╕рд┐рд▓ рдХрд░реЗрдВрдЧреЗ рдФрд░ рдбрд╛рдпрдирд╛рдорд┐рдХ рдЯрд╛рд╕реНрдХ рдЬрдирд░реЗрд╢рди рддрдХрдиреАрдХ рд╕реАрдЦреЗрдВрдЧреЗред

рдкреНрд░реЛрдбрдХреНрд╢рди-рд░реЗрдбреА рд░рдгрдиреАрддрд┐рдпрд╛рдБ ЁЯПЧя╕П
рд╕рдордЭреЗрдВ рдХрд┐ OpenAITriggerBatchOperator рдХреЗ рд╕рд╛рде рд░рд┐рдпрд▓-рдЯрд╛рдЗрдо рдХреЗ рдмрдЬрд╛рдп рдмреИрдЪ рдкреНрд░реЛрд╕реЗрд╕рд┐рдВрдЧ рдХрдм рдЪреБрдиреЗрдВ, CountTokensOperator рдХрд╛ рдЙрдкрдпреЛрдЧ рдХрд░рдХреЗ рд▓рд╛рдЧрдд рдирд┐рдЧрд░рд╛рдиреА рдХреИрд╕реЗ рд▓рд╛рдЧреВ рдХрд░реЗрдВ, рдордЬрдмреВрдд рддреНрд░реБрдЯрд┐ рдкреНрд░рдмрдВрдзрди рдФрд░ рдкреБрдирдГ рдкреНрд░рдпрд╛рд╕ (retry) рд░рдгрдиреАрддрд┐рдпрд╛рдБ рдХреИрд╕реЗ рдбрд┐рдЬрд╝рд╛рдЗрди рдХрд░реЗрдВ, рдФрд░ Ray рдХреНрд▓рд╕реНрдЯрд░ рдПрдХреАрдХрд░рдг рд╕рд╣рд┐рдд рд╕реНрдХреЗрд▓рд┐рдВрдЧ рдкреИрдЯрд░реНрди рдХрд╛ рдкрддрд╛ рд▓рдЧрд╛рдПрдВред

рдХрд╛рд░реНрдпрдХреНрд░рдо рдХрд╛ рд╡рд┐рд╡рд░рдг ЁЯУЕ

  • рджрд┐рдирд╛рдВрдХ: 1 рдирд╡рдВрдмрд░, 2025
  • рд╕рдордп: рд╕реБрдмрд╣ 10:30 рдмрдЬреЗ EST
  • рдЕрд╡рдзрд┐: 2 рдШрдВрдЯреЗ
  • рдкреНрд░рд╛рд░реВрдк: рдкреНрд░рд╢реНрдиреЛрддреНрддрд░ (Q&A) рдХреЗ рд╕рд╛рде рдЗрдВрдЯрд░реИрдХреНрдЯрд┐рд╡ рдСрдирд▓рд╛рдЗрди рдХрд╛рд░реНрдпрд╢рд╛рд▓рд╛

рдбреЗрдЯрд╛ рдЗрдВрдЬреАрдирд┐рдпрд░реЛрдВ, MLOps рдкреНрд░реИрдХреНрдЯрд┐рд╢рдирд░реНрд╕ рдФрд░ рдЕрдкрдиреЗ AI рд╡рд░реНрдХрдлрд╝реНрд▓реЛ рдХреЛ рд╕реБрд╡реНрдпрд╡рд╕реНрдерд┐рдд рдХрд░рдиреЗ рдХреЗ рдЗрдЪреНрдЫреБрдХ рдбреЗрд╡рд▓рдкрд░реНрд╕ рдХреЗ рд▓рд┐рдП рдмрд┐рд▓реНрдХреБрд▓ рд╕рд╣реА!

ЁЯФЧ рдЬреБрдбрд╝реЗ рд░рд╣реЗрдВ: рд╣рдорд╛рд░реЗ рдЬреАрд╡рдВрдд рд╕рдореБрджрд╛рдп рдореЗрдВ Discord, WhatsApp, LinkedIn рдкрд░ рд╢рд╛рдорд┐рд▓ рд╣реЛрдВ, рдпрд╛ рд╣рдорд╛рд░реА рд╡реЗрдмрд╕рд╛рдЗрдЯ рдкрд░ рдЬрд╛рдПрдВред

рд╕реНрдерд╛рди.conf

рд╕реНрдерд╛рди

Atlanta, Georgia, USA
рдСрдирд▓рд╛рдЗрди
рд╡рд┐рд╡рд░рдг.yml

рд╡рд┐рд╡рд░рдг

рджрд┐рдирд╛рдВрдХ рдПрд╡рдВ рд╕рдордп
1 рдирд╡рдВрдмрд░, 2025 рдкрд░ 2:30 PM ┬╖ UTC
рд╕рдордп рдХреНрд╖реЗрддреНрд░
UTC
рдЕрд╡рдзрд┐
2 рдШрдВрдЯреЗ
рджреНрд╡рд╛рд░рд╛ рдЖрдпреЛрдЬрд┐рдд рдХрд┐рдпрд╛ рдЧрдпрд╛
The Ubuntu TechHive North America