Search
🔵

ba2.4.5.4. title: TFX와 같이 아파치 빔을 백엔드로 활용하는 프레임워크를 사용한다면 아파치 빔(beam)을 파이프라인을 실행하는 오케스트레이션 도구로 사용할 수 있다. 하지만 다양한 기능을 지원하지는 않는다.

생성
🚀 prev note
🚀 next note
♻️ next note
14 more properties
TFX와 같이 아파치 빔을 백엔드로 활용하는 프레임워크를 사용한다면 아파치 빔(beam)을 파이프라인을 실행하는 오케스트레이션 도구로 사용할 수 있다. 하지만 다양한 기능을 지원하지는 않는다(참고1).
parse me : 언젠가 이 글에 쓰이면 좋을 것 같은 재료들.
1.
None
from : 과거의 어떤 생각이 이 생각을 만들었는가?
1.
2.
하지만 아파치 빔은 애초에 워크플로 오케스트레이션을 목적으로 설계된 도구가 아니다.
3.
하둡과 스파크 등을 사용할 때 어려운 부분은 프레임워크 이외의 작업과 얽히는 것이다. 하지만 빔을 이용하면 언어 레벨에서 다른 작업과 엮을 수 있다.
supplementary : 어떤 새로운 생각이 이 문서에 작성된 생각을 뒷받침하는가?
1.
None
opposite : 어떤 새로운 생각이 이 문서에 작성된 생각과 대조되는가?
1.
None
to : 이 문서에 작성된 생각이 어떤 생각으로 발전되고 이어지는가?
1.
None
참고 : 레퍼런스