devopslog

  • 홈
  • 태그
  • 방명록

devops 72

DuckDB, CSV에서 MySQL로의 ETL

DuckDB를 ETL 도구로 활용 : CSV 데이터 → MySQL DuckDB를 통한 CSV 데이터를 MySQL로 ETL 하는 방법ETL이란?ETL이란 Extract, Transform, Load의 약자로, 데이터를 다양한 소스에서 추출하고 변환하고 적재하는 과정ETL을 수행하기 위해서는 여러가지 툴을 사용할 수 있는데 그 중 하나 DuckDB 활용하는 안DuckDBDuckDB는 분석 쿼리에 최적화된 임베디드 데이터베이스 DuckDB는 PostgreSQL과 호환되는 SQL 문법을 사용하고, 여러 DB와 연결하여 데이터를 효율적으로 가져와 로컬 DuckDB에서 데이터 처리 가능Extensions : https://duckdb.org/docs/extensions/overviewETL 예제DuckDB에서 CS..

devops 2025.05.18

trino(presto) nested json 예제

trino(presto) nested json 를 처리하기 위한 table schema 예제trino(presto) - create tablerow : json object (nested json) 타입을 위한 sub column 정의 array : 배열Example{"id":1,"name":"Alice"}{"id":2,"name":"Bob"}{"id":3,"name":"Carol"}{"id":4,"name":"David", "etc1": [{"key": "key-data11"}, {"key": "key-data22"}] }{"id":5,"name":"Elise", "etc2": ["data1", "data2", "data3"]}create table hive.default.sample ( id v..

devops 2025.05.18
이전
1 ··· 5 6 7 8
다음
더보기
프로필사진

devopslog

✔ Write down what comes to mind

  • 분류 전체보기 (131) N
    • dev (44) N
    • devops (84) N
    • util (3)

Tag

kubernetes, Obsidian, Linux, C++, 티스토리챌린지, Productivity, Python, Security, CMake, AI, 오블완, docker, dev, MySQL, devops, minio, cli, macos, k8s, automation,

최근글과 인기글

  • 최근글
  • 인기글

최근댓글

공지사항

페이스북 트위터 플러그인

  • Facebook
  • Twitter

Archives

Calendar

«   2025/12   »
일 월 화 수 목 금 토
1 2 3 4 5 6
7 8 9 10 11 12 13
14 15 16 17 18 19 20
21 22 23 24 25 26 27
28 29 30 31

방문자수Total

  • Today :
  • Yesterday :

Copyright © Kakao Corp. All rights reserved.

티스토리툴바