기본 콘텐츠로 건너뛰기

파일 싱크 방법(RSync, BitTorrent Sync, Dropbox, SkyDrive, Google Drive)

작성자:
원래는 파일 정리중에 RSync 커맨드 파일이 있어 정리를 하다가 보니..
요즘 안쓰는 이유를 생각하다가 정리를 하게 되었습니다.

제가 주로 사용했던 파일 Sync툴의 장단점을 소개합니다.
주로 집, 작업실, 클라우드 서버간의 파일 동기 및 백업 용도로 사용합니다.

1. BitTorrentSync (http://www.bittorrent.com/intl/en/)
  - 용량제한 없이 내가 설정한 디렉토리를 모두 싱크 걸 수 있다는 장점이 있음.
  - 여러대의 PC에서 내가 원하는 디렉토리만 싱크를 걸 수 있어 여러군데에서 작업하거나 원격지 백업을 하느데 적합
  - 어느 하나 PC가 망가져도 데이터가 실시간으로 동기되기 때문에 내가 설정한 어딘가의 PC에는 백업이 되어있음
  - 읽기 전용 Hash(싱크할 때 쓰는 키)가 있어 친구들에게 해시만 공유할 수도 있음.
  - 무료!!!

2. Bdrive (http://www.bdrive.com)
  - 친구들과 만화, 동영상, 책등을 공유할 때 사용.
  - Facebook친구들을 베이스로(그냥 회원가입해도 됨) 디렉토리별 권한을 줄 수 있어 공유가 편리.
  - 스마트폰에서 리얼타임 스트리밍으로 동영상 시청 가능(다운로드 시간 불요)
  - 스마트폰에서 다운로드 없이 만화책이나 음악감상 가능.
  - 집에 2TB HDD를 설치하면 스마트폰이 2TB메모리가 추가된 느낌??
  - PC버전은 디스크 드라이브로 마운트 가능하여 로컬디스크처럼 사용도 가능(인터넷 속도에 비례하므로 쾌적하게 대용량 복사는...;;.)
  - 집이 PC를 파일서버로 사용하기 편리함.
  - 자신의 PC를 기반으로 하는 것이라 용량 무제한.
  - 무료!!!

3. Google Drive
  - 작업하는 작은 Document등을 여러 PC에 싱크하기 편리함.
  - 웹기반의 브라우징을 지원하여 다양한 기기에서 파일을 공유할 수 있음.
  - 웹기반 오피스 문서 편집 기능이 있어 도형이외의 기본적인 작업을  웹상에서 할 수 있음.
  - 5GB만 제공..확장은 유료..
- PC Sync기능이 있어 PC의 데이터를 설정한 PC간에 실시간으로 동기화 해줌

4. Skydrive
  - MSN ID를 가진 사람은 누구나 무료로 7GB까지 사용가능(가끔 보면 정책이 자주 바뀌어 용량도 그때그때 다름.. 초창기 아이디로 미리 받은 사람은 25GB사용가능)
  - 하나의 아이디로 권한이양이 가능하여 5개 아이디를 만들어 하나에 몰아주면 7GB짜리 디렉토리 5개를쓰는것 처럼 쓸 수 있음.
  - PC Sync기능이 있어 PC의 데이터를 설정한 PC간에 실시간으로 동기화 해줌

5. Dropbox
  - 기본 2GB밖에 지원이 안됨. 친구추천등으로 5GB까지 늘릴 수 있다나..
  - 쉐어 된 디렉토리를 모두 싱크를 걸기 때문에 Skydrive나 Google Drive처럼 쉐어된 파일들을 다운 받아야 하는 불편함이 없음.
  - 스마트폰, PC, 카메라, 노트북, 기타 가족들의 스마트폰을 모두 하나의 계정에 싱크를 걸어두면 PC에서 사진을 정리하기 편리함(자동으로 다운까지 받아주니..)
  - 스마트폰 지원.. 용량제약이 심하고.. 유료 옵션을 써야 제대로 쓸 듯..

일단 이정도.. 또 사용하는거 생기면 업뎃할께용~

========================================

RSync의 윈도우, 리눅스 버전이 있어서 자주 쓰는 툴이라 설정 방법을 메모..

1. 윈도우 버전이나 리눅스 버전을 받아서 OS에 맞추어 설치.
2. 스크립트 샘플 파일을 작업디렉토리에 복사.
3. 커맨드를 수정

rsync -r /cygdrive/i/AirPort/ /cygdrive/o/AirPort
I:\AirPort -> O:\AirPort 로 디렉토리째 싱크
rsync -r --ignore-existing /cygdrive/o/test01/ /cygdrive/i/test01/
o:\test01 -> i:\test01 로 디렉토리째 싱크

4. 스케쥴러 등록(프로세스 모드가 있긴한데.. 계속 띄워놔야하고 떨어지면 모르기 때문에 스케쥴러가 편한듯)

예전 설정이라 저장해놓는데..
요즘은 BitTorrentSync 라는 프로그램을 주로 사용하기 때문에 RSync를 안쓰게 되었음..

RSync는 리눅스까지 커버한다는 장점..
BitTorrentSync는 리얼타임 싱크 및 여러 PC간 싱크가 가능하여 복잡한 설정이 필요없음.

태그

라벨:

댓글

댓글 쓰기

이 블로그의 인기 게시물

일본 두바퀴 여행(바이크 편)

작성자:
영상버전 : https://youtu.be/P3vC17iVu1I 이번에는 일본으로 넘어와서 일본 종주하시는 바이커들을 위한 정보입니다.  일본에서의 2륜의 정의가 면허와 도로교통법이 조금씩 다르다고 합니다.  그래도 그렇게 크게 신경쓸 건 없으니 딱 세 종류로 말씀 드릴께요.  50cc는 원동기 1종이라고 하여 3차선 이상 교차로에서 우회전, 한국에선 좌회전 같이 크게 도는 것이지요..  이게 불가능합니다.  직진 신호로 넘어간 뒤에 방향을 틀고 다시 직진으로 두번 꺾어 가야 하구요,  두 명이 타면 안됩니다.  그리고 맨 가장자리 길로만 가야해서 애매하게 끝에서 두 번째 차선만 직진인 곳들이 있어서 난감할 때가 있지요. 그런데에 직진하면 걸리는 곳이 있다고 합니다. 어느 정도까지 걸리고 안걸리고는 정확히는 모르지만,  직좌 마크가 아닌 좌회전 마크만 있는 곳이 은근히 많으니 조심해야 하겠더라구요.  최고 시속도 30km를 넘기면 안되어 천천히 달려야 합니다.  아뭏든 제약이 엄청나게 많으므로 60cc이상을 가져오시거나 렌트 하시는 것을 추천하구요,  125cc미만은 겐츠키 2종이라고 하여 두 명이 타도 되고, 3차선 이상에서 우회전이 가능합니다.  상당히 제약이 풀리는 대신 고속도로를 탈 수가 없지요.  만약 국도로 천천히 올라오신다면 125cc미만으로도 충분합니다.  실제로 일본인 바이커들 중에서도 국도 종주하는 모습을 많이 볼 수 있구요,  도심에 가면 125cc미만까지만 주차 가능한 바이크 주차장도 꽤 많기 때문에 도심용으로는 메리트가 큰 것 같습니다.  뭐, 125cc대는 곳에 큰 바이크를 대는 경우도 자주 보는데, 아무도 뭐라 안하긴 합니다.  그도 그럴 것이, 일본의 바이크 등록대수는 1031만대 인데도 바이크 전용 주차장은 턱없이 부족하다고 합니다. 바이크 주차장이 저렴하기 때문에 웬만한 ...
댓글 쓰기
자세한 내용 보기

책에서는 안 알려주는 대규모 트래픽을 위한 설계

작성자:
음성 버전 :  https://www.youtube.com/watch?v=ZZlW6diG_XM 대규모 트래픽을 커버하는 첫 페이지 만드는 법..  보통 DB를 연결할 때 대규모 설계는 어떻게 하시나요?  잘 만들었다는 전제 하에 동접 3000명 이하는  어떤 DBMS를 사용해도 문제 없이 돌아갑니다.  여기서 이미 터졌다면 이 콘텐츠를 보기 전에 DB의 기초부터 보셔야 합니다.  아.. 개발 코드가 터졌다구요? 그럼 개발자를 때리셔야지요..  만약 3000명을 넘겼다면? 이제 Write/Read를 분리해서  1 CRUD + n개의 READ Replica를 만들겠죠?  보통 Read Replica는 5개가 최대라고 보시면 됩니다.  누가 연구한 자료가 있었는데...  6번째 레플리카를 만든느 순간 마스터가 되는 서버의 효율 저하 때문에  5번째에서 6번쨰로 올릴때의 성능이 급격히 줄어든다는 연구 결과가 있습니다.  때문에 Azure에서도 replica설정할 때 5대까지 밖에 설정 못하게 되어 있지요.  유저의 행동 패턴에 따라 다르긴 하지만,  1 CRUD + 5 Read Replica의 경우 동접 15000명 정도는 커버 합니다.  즉, 동접 15000명 에서 다시 터져서 저를 부르는 경우가 많지요..  이 때부터는  회원 DB, 게시판DB, 서비스DB, 과금 DB 등등 으로 성격, 서로의 연관도에 따라 나누기 시작합니다.  물리적으로 DB가 나눠지면 Join을 못하거나 Linked Table또는 LinkDB등의 연결자를 이용해서 JOIN이 되기도 합니다.  그에 따라 성능 차이가 생기지만 가장 중요한 포인트는  서로 다른 물리적 테이블의 JOIN은 인덱스를 타지 않는다!  라는 것입니다. 즉, JOIN할 테이블들을 최소한으로 만든 뒤에 JOIN을 걸지 않으면 NoSQ...
댓글 쓰기
자세한 내용 보기

BI의 궁극판! Apache Drill을 써보자!

작성자:
사실 Apache Drill 은 BI(Business Intelligence)라고 부르는 것 보다는 단순 데이터 연결 엔진이다. https://drill.apache.org/ 하지만 내가 왜 극찬을 하느냐면.. DBA로서 항상 문제가 되어왔던게, 이기종 데이터의 변환이나 처리였다. 포맷을 맞추는데 엄청난 시간이 걸리고, 데이터 임포트 실패가 무수하게 나고.. 한 번 잘못 데이터를 추출하면 다시 조정, 변환, 추출하는데 시간이 많이 걸린다. 그런데! Apache Drill은 그냥 RDB를 CSV랑 연결해서 조인해서 통계를 낼 수 있다. 그것도 표준 SQL을 사용하여! 예를 들어, CSV의 세 번째 컬럼이 price 이고, 물건의 판매이력을 PG사에서 CSV로 출력 받았다. 우리 DB와의 검증을 위해서는 수동으로 Import를 한 뒤에 포맷이 안맞아 잘리는 데이터가 있다면 다시 맞춰주고, 재 임포트를 수십 번, 그리고 나서 겨우 들어간 데이터를 조인하여 빠진 데이터를 분간한다. 숫자가 적다면 개발자가 개발로 처리할 수도 있지만, 건수가 하루에 300만건 짜리라면.. 한 달 온 파일은 9천만 건이다. 프로그램으로 고작 처리하는 것이 초당 500건. 거의 20만초, 에러 없이 약 56시간.. 에러가 생기면 다시 56시간.. ㅠㅡㅠ 이런게 현실이기 때문에 쿼리 말고는 방법이 없다. apache drill 의 진면목을 보자! 이번에는 좀 범용 적인 MySQL DB와 붙여 보자. . 난 이번에는 Mac에서 작업을 했기 때문에 그냥 다운 받아서 풀었음.. https://drill.apache.org/download/ 여기서 자기 OS에 맞는 버전을 받아서 설치하시길.. 압축을 풀고 나면 MySQL 커넥터를 붙여야 한다. https://dev.mysql.com/downloads/connector/j/5.1.html 여기서 다운로드 이런 커넥터 들을 붙일 때마다 콘피그를 수정해 줘야 하지만, 몇 번만...
댓글 쓰기
자세한 내용 보기