LiveHard

  • 홈
  • 태그
  • 방명록

Configuration 1

airflow configuration 주요 파라미터

간단하게 적어본 주요 airflow configuration 파라미터 airflow web에 hostname출력여부 expose_hostname= True metrics 사용 statsd_on= True custom xcom사용시 xcom_backend=plugins.airflow-plugin.custom_xcom.CustomXComBackendS3 - DagFileProcessManager관련(dag객체로 전환할 파일감지/제외) ## 300, 신규(또는 수정된)dag파일 scan주기 dag_dir_list_interval=120 기본적인 dag패치 loop주기(변경안된파일, 최근 수정된 파일은 list제외) min_file_process_interval=30 - DagFileProcessorProces..

data engineering/airflow 2024.03.19
이전
1
다음
더보기
프로필사진

LiveHard

  • 분류 전체보기 (34)
    • network (0)
    • python (0)
      • fastapi (0)
    • k8s 및 인프라 (13)
      • k8s (4)
      • istio (1)
      • certmanager (0)
      • keycloak (0)
      • prometheus (4)
      • rook-ceph (4)
    • CICD (0)
    • data engineering (10)
      • airflow (5)
      • minIO (3)
      • redis(keydb) (1)
    • 일상 (0)
    • AI (5)
      • 중국AI산책 (1)
      • LLM (3)
      • RAG (1)
    • MLOps (7)
      • GPU (5)
      • Langserve (1)
      • kubeflow (1)

Tag

TaskFlow, vGPU, OpenClaw, GPU Operator, gpu-operator, LLM, servicemonitor, gpt-oss-120b, ceph, Prometheus, prometheus operator, helm, MinIO, airflow, istio, dgx spark, local llm, k8s, rook-ceph, AgentAI,

최근글과 인기글

  • 최근글
  • 인기글

최근댓글

공지사항

페이스북 트위터 플러그인

  • Facebook
  • Twitter

Archives

Calendar

«   2026/04   »
일 월 화 수 목 금 토
1 2 3 4
5 6 7 8 9 10 11
12 13 14 15 16 17 18
19 20 21 22 23 24 25
26 27 28 29 30

방문자수Total

  • Today :
  • Yesterday :

Copyright © AXZ Corp. All rights reserved.

티스토리툴바