devopslog

SQL Server 대량 복사 프로그램 유틸리티(b ulk c opy p rogram utility, bcp)BCPhttps://docs.microsoft.com/ko-kr/sql/tools/bcp-utilitySQL Server 의 Bulk 대량 데이터 Export 및 Import 유틸리티설치Windows다운로드 : Microsoft® Command Line Utilities 14.0 for SQL Server{:target="_blank"}LinuxSQL Server 의 리눅스 지원으로 사용 가능 Linux에서 SQL Server 명령줄 도구 sqlcmd 및 bcp 설치{:target="_blank"}Export 기본cvs 파일로 테이블(쿼리 데이터) Export $ bcp사용법: bcp {dbtab..

MinIO 101Introductionhttps://docs.min.io/Open Source, S3 Compatible, Enterprise Hardened and Really, Really FastS3 Compatible : Client(mc), SDK (Java, Javascript, Python, Golang, .Net ..)high performance, distributed object storage systemPrivate cloud object storageGetting StartedMinID 는 Golang으로 제작되어 의존성 없는 단일 파일로 운영 가능 Docker의 경우 Alpine linux 로 배포 Downloads : https://min.io/downloadQuickstart ..

MySQL 8 Docker 실행 및 백업, 복원MySQL Docker 실행docker-composedata:/var/lib/mysql : Data 파일 conf.d:/etc/mysql/conf.d : my.cnf 등의 설정파일 root:/root : login-path 사용시 ports : "3380:3306" : mysql port "33800:33060" : mysql-shell port version: '3'services: db: image: mysql:8 container_name: mysql8 command: --default-authentication-plugin=mysql_native_password restart: always environment: ..

ElasticSearch to MySQL ETL준비curl : Http 기반 ElasticSearch Query (SQL)jq : ElasticSearch 결과 JSON 변환 (NDJSON)mysql-shell : MySQL 데이터 Bulk Insert (Json 타입의 Table)ElasticSearch Query curl쿼리 후, 해당 내용 JSON 저장 $ curl -s -XPOST -H 'content-type: application/json' \ -d '{"query" : "select timestamp, activesession, loadavg, processor from \"mysql-perf-*\" limit 100"}' \ 'http://elasticsearch-server:..

Ansible aws_ec2 plugin 활용, AWS EC2 동적 Inventory 구성 Ansible plugin : aws_ec2https://docs.ansible.com/ansible/2.9/plugins/inventory/aws_ec2.htmlGet inventory hosts from Amazon Web Services EC2Requirementspython package : boto3, botocoreYAML 설정 파일 이름이 aws_ec2.(yml|yaml) 로 끝나야 함$ ansible --versionansible 2.9.6 config file = /etc/ansible/ansible.cfg configured module search path = ['/home/cdecl/.an..

MySQL BinLog (Binary Log) 설정 및 확인MySQL Binloghttps://dev.mysql.com/doc/internals/en/binary-log-overview.htmlhttps://dev.mysql.com/doc/refman/5.7/en/replication-options-binary-log.html데이터 수정에 대한 정보를 포함하는 로그 파일 세트Binlog 를 사용하는 목적복제 : 마스터 복제 서버에서 슬레이브 서버로 보낼 명령문의 기록으로 사용데이터 복구 : 백업 파일이 복원된, 특정 시점 이후의 데이터 복구를 위해 사용 Binlog 기록하는 방법 binlog-formatSTATEMENT : 이벤트에는 데이터 변경(삽입, 업데이트, 삭제)을 생성하는 SQL 문이 포함MyS..

Cgo enables the creation of Go packages that call C code.Cgohttps://pkg.go.dev/cmd/cgoGolang에서 C 코드를 통합 할 수 있도록 만든 의사 패키지 C코드 - Go 파일 통합예제import "C" 바로 윗 부분의 주석 /* */ or // 으로 C코드 작성C 함수, 변수 영역 접근시, C 의 패키지 명으로 접근 함수, 변수선언, #include 선행처리지시자 등 일반적인 C 코드cgo Cheat Sheet : https://gist.github.com/zchee/b9c99695463d8902cd33package main/*#include // printf#include // free (C.free)void pri..

https://vcpkg.io/Vcpkg helps you manage C and C++ libraries on Windows, Linux and MacOS. This tool and ecosystem are constantly evolving, and we always appreciate contributions!Introductionhttps://github.com/microsoft/vcpkgMS에서 만든 C++ Library Package 관리 (Cross Platform)Vcpkg installGit 이 필요하고, bootstrap-vcpkg 실행으로 필요한 툴을 다운로드(빌드)하는 작업을 수행vcpkg.exe 생성 $ git clone https://github.com/microsoft/vcpk..

Introductionhttps://github.com/Microsoft/cpprestsdkMicrosoft에서 만든 클라이언트, 서버용 C++ HTTP 통신 모듈이며, JSON URI, 비동기, 웹소켓, oAuth 등을 지원 C++11의 비동기, 병렬 프로그램 모델 지원크로스 플랫폼 지원 등..cpprestsdk package install (w/ vcpkg)https://github.com/microsoft/vcpkgvcpkg 통해서 패키지 설치 # --triplet=x64-windows-static$ vcpkg.exe install cpprestsdk:x64-windows-static...The package cpprestsdk:x64-windows-static provides CMake targe..

Snapshots 기능을 제공하는 modern backup programrestichttps://restic.net/Go로 만들어진 백업 프로그램, 크로스프랫폼 지원- from Linux, BSD, Mac and Windows- to many different storage types, including self-hosted and online services- easily, being a single executable that you can run without a server or complex setup- effectively, only transferring the parts that actually changed in the files you back up- securely, by carefu..