devopslog

Go 언어로 만든 크로스 플랫폼 클라우드 스토리지 특화 백업 및 동기화 프로그램Rclonehttps://rclone.org/file, sftp 부터 Amazon S3, MinIO 와 같은 Object Storage, Cloud Storage 등의 많은 Providers 를 지원Install플랫폼 바이너리 다운로드 or 패키지 매니저 활용 https://rclone.org/downloads/Rclone configProviders 설정 기반, config 파일을 통해 설정Rclone config 기본 파일 위치 확인# linux config 파일 위치 확인$ rclone config fileConfiguration file is stored at:/home//.config/rclone/rclone.conf..

MinIO Windows Service 등록MinIO Service 등록WinSWhttps://github.com/winsw/winswWindows 실행 파일을 서비스로 래핑해주는 툴 .NET Framework / Core 기반 Windows 플랫폼에서 실행MinIO Servicehttps://github.com/minio/minio-service/tree/master/windowsWinSW 최신 Release 다운로드 및 XML 설정 파일 작성# choco install curl# 다운로드 $ curl -LO https://github.com/winsw/winsw/releases/download/v2.11.0/WinSW-x64.exe# rename$ move WinSW-x64.exe minio-serv..

MinIO 101Introductionhttps://docs.min.io/Open Source, S3 Compatible, Enterprise Hardened and Really, Really FastS3 Compatible : Client(mc), SDK (Java, Javascript, Python, Golang, .Net ..)high performance, distributed object storage systemPrivate cloud object storageGetting StartedMinID 는 Golang으로 제작되어 의존성 없는 단일 파일로 운영 가능 Docker의 경우 Alpine linux 로 배포 Downloads : https://min.io/downloadQuickstart ..

Snapshots 기능을 제공하는 modern backup programrestichttps://restic.net/Go로 만들어진 백업 프로그램, 크로스프랫폼 지원- from Linux, BSD, Mac and Windows- to many different storage types, including self-hosted and online services- easily, being a single executable that you can run without a server or complex setup- effectively, only transferring the parts that actually changed in the files you back up- securely, by carefu..

trino(presto), minio docker 활용 테스트 환경 trino (hive connector) to miniotrino 의 hive connector 를 활용해서 minio 데이터 분석 환경Hive connector : https://trino.io/docs/current/connector/hive.html참고 : https://github.com/cdecl/trino-minio-dockerdocker-compose (trino, minio)version: '3'services: trino: image: trinodb/trino container_name: trino restart: always ports: - "8080:8080" volumes: ..