Datahub 외, DW 플랫폼 직접연결

[YuujinHwang]

Why❓

데이터 분석가들이나, #79 에 언급된 보여주는 결과의 경우 DW > DB 사용 빈도가 높음
Datahub와 같은 별도의 메타데이터 솔루션을 사용하지 않는 경우도 있음

How❓

오픈소스 카탈로그

• Datahub
• Openmetadata

데이터플랫폼

• Snowflake
• Databricks
• (BigQuery)
• Redshift
• (Fabric ?)

등 Description 제공하는 서비스들에서 메타데이터 추출

What❗️

Tree 구조로 벡터 DB에 인덱싱
Description은 벡터화 진행
기타 데이터는 평문으로 저장

[nonegom]

해당 기능은 실제 적용이 되면 꽤나 의미가 있을 것 같다고 생각합니다. 해당 테스크를 조금씩 쪼개서 진행하는 것도 좋을 것 같습니다!