반응형
데이터 엔지니어링/Airbyte
-
Airbyte 알아보고 사용해 보기데이터 엔지니어링/Airbyte 2022. 12. 6. 22:30
Airbyte란? Airbyte는 ELT의 주요 요소인 데이터 통합 플랫폼 스타트업 기업이다. 오픈소스이며, 소스는 airbyte라는 회사에서 관리한다. ELT에서 EL을 손쉽게 구현할 수 있도록 도와주는 툴을 제공한다. 수많은 커넥터를 제공한다. CDC도 손쉽게 구현 할 수 있게 도와준다 T에서 약점을 가지고 있지만, dbt를 이용하여 문제점을 해결할 수 있다. Airbyte 설치하기 오픈 소스 이므로 아래의 코드로 다운 받아서 docker로 올리면 된다 해당 내용은 airbyte 공식 문서에서 확인 가능하다. git clone cd airbyte docker-compose up container가 다 올라갔다면, http://localhost:8000/ 로 접속 하여 확인 초기 id : airbyte..