Cloud
![[NCP] Cloud Hadoop 서비스 사용하기](https://img1.daumcdn.net/thumb/R750x0/?scode=mtistory2&fname=https%3A%2F%2Fblog.kakaocdn.net%2Fdn%2FcuZBKI%2FbtrOQCp9yd6%2F3VcSpfgYKarYYL2S7XCZp0%2Fimg.png)
[NCP] Cloud Hadoop 서비스 사용하기
Apache Hadoop? 하둡은 대용량 데이터를 분산 처리할 수 있는 자바 기반의 오픈소스 프레임워크 입니다. 분산저장 기술인 HDFS와 분산처리 기술인 맵리듀스(MapResuce)가 장점이다. NCP의 Cloud Hadoop? Apache Hadoop, HBase, Spark, Hive, Presto 등의 오픈소스 기반 프레임워크를 사용자가 자유롭게 사용하여 빅데이터를 쉽고 빠르게 처리할 수 있는 완전 관리형 클라우드 분석 서비스 다양한 프레임워크 지원 Hadoop: 간단한 프로그래밍 모델을 사용하여 컴퓨터 클러스터 전체에 대규모 데이터 세트를 분산 처리할 수 있는 프레임워크 HBase: 분산되고 확장 가능한 대용량 데이터 저장소 Spark: 대규모 데이터 처리를 위한 통합 분석 엔진 Hive: SQ..
![[AWS] RDS 다중AZ이란?(Active,Standby 와 Master,Slave)](https://img1.daumcdn.net/thumb/R750x0/?scode=mtistory2&fname=https%3A%2F%2Fblog.kakaocdn.net%2Fdn%2FmbX2g%2FbtrIiZ5coHa%2Fk3ORLKpl8cAQxzEk3JJ5Yk%2Fimg.png)
[AWS] RDS 다중AZ이란?(Active,Standby 와 Master,Slave)
Active , Standby 와 Master, Slave 차이 -Active : 평상시 Request 를 받아 처리할 수 running 중의 시스템 -Standby ( = Passive = Backup ) : Active 시스템의 장애시 Request 를 처리할 수 있는 시스템 -Master : Write 를 처리할 수 있는 Active 시스템 -Slave : Read 를 처리할 수 있는 Active 시스템 대기가 1개인 Amazon RDS 다중 AZ Amazon RDS 다중 AZ 배포에서 Amazon RDS는 자동으로 프라이머리 데이터베이스 DB 인스턴스를 생성하고 동시에 다른 AZ의 인스턴스에 데이터를 복제한다. 장애를 감지하면 Amazon RDS는 수동 개입 없이 자동으로 대기 인스턴스로 장애 조..
![[AWS] Load Balancer 리스너 설정하기](https://img1.daumcdn.net/thumb/R750x0/?scode=mtistory2&fname=https%3A%2F%2Fblog.kakaocdn.net%2Fdn%2FdsymxL%2FbtrHn8iOaBZ%2FDmRSnpgXgBeyA0sKKSUSq0%2Fimg.png)
[AWS] Load Balancer 리스너 설정하기
Load Balancer의 구성요소 1) 리스너 부분 2) 리스너추가 리스너를 추가 할 때 3가지 작업이 존재하는데, '전달 대상' , '리디렉션 대상' , '고정 응답 반환' 이 있다. 2-1) Forward to Target group 을 선택하여 각 대상그룹의 요청 처리 비중을 설정하고 트래픽을 분담합니다. 2-2) Redirect Redirect 기능은 사용자의 요청을 또 다른 URL로 전달하는 것을 의미한다. 예를 들어 사용자가 HTTP 리스너에 접속하고 입력한 URL이 'echo.com'일 경우 'www.naver.com'로 연결하여 네이버 웹페이지를 띄워야할 때 설정할 수 있다. 2-3) Ridirect fixed response 고정 응답 반환은 대상그룹으로 전달하거나 리다이렉션하는 것이 ..
[NCP] DB서버를 스냅샷 할 시 주의 사항(Sync 명령어)
DBMS가 설치된 서버에는 데이터 쓰기작업이 수시로 이루어진다. 운영 중인 이 DB서버를 스냅샷 할 때, Database의 변경된 내용이 바로 Storage에 저장이 안될 수 있다. 바로 Storage에 씌여지지 않고, 일정 시간 memory에 disk cache로 남는다. 따라서 서버 운영중 스냅샷을 생성하고 싶은 경우 스냅샷 찍기 직전에 sync 명령을 통해 cache와 storage를 sync하는 작업이 필요하다. Sync 데이터 동기화 작업을 하는 명령어다. 현재 작업 중인 저장 되지 않은 메모리의 데이터를 디스크로 저장하는 작업이다. 즉 " 디스크에 저장되어 있지 않은 메모리 버퍼의 데이터를 디스크에 저장하는 sync 작업" 이다. 아직 디스크에 저장이 되지 않은 상태로 버퍼에 남아있는 데이터들..
![[NHN Cloud] NIC 추가 방법(주의사항)](https://img1.daumcdn.net/thumb/R750x0/?scode=mtistory2&fname=https%3A%2F%2Fblog.kakaocdn.net%2Fdn%2FdjlGPf%2Fbtrnvz1ruU3%2FvKLNxycHNtCPaAxsSNCoX0%2Fimg.png)
[NHN Cloud] NIC 추가 방법(주의사항)
*3개의 NIC가 이미 있는 상태에서 추가하는 상태입니다. 1) 콘솔에서 추가하기 전에 서버에서 ifcfg-eth# 파일이 있는지 확인 cd /etc/sysconfig/network-scripts ls -> 이 경우에는 NIC가 이미 3개 붙여있는 상황임 그래서 eth0 , eth1, eth2 3개가 존재 2) 추가할 NIC 의 파일을 만들기 vi ifcfg-eth3 DEVICE=eth3 TYPE=Ethernet ONBOOT=yes BOOTPROTO=dhcp IPV6INIT=no METRIC=300 3) 서버 종료 후 NIC 추가 작업하기 (NHN 콘솔에 가서 서브넷 변경하기) *참고 NHN 가이드 4) 서브넷 생성 -> NIC 생성 -> 서버에 NIC 붙이기 순서(서버는 종료후 붙여야함) 다음과 같이..
Compute > System Monitoring 에서 Agent 설치 방법
*2019년부터는 서버 설치시 자동으로 모니터링 agent설치되 있음
![[NHN Cloud] CentOS7.8 백업 서비스 이용하기(백업 에이전트 설치)](https://img1.daumcdn.net/thumb/R750x0/?scode=mtistory2&fname=https%3A%2F%2Fblog.kakaocdn.net%2Fdn%2FdbMZQ4%2FbtrgRSTgOHU%2FvpS2OM1sETPZ4YwRMibRp1%2Fimg.png)
[NHN Cloud] CentOS7.8 백업 서비스 이용하기(백업 에이전트 설치)
1. 백업 CLI 설치 (Linux) 저는 한국(판교)리전에 설치할 것입니다. (만약 소산백업을 할시에는 다른 리전에도 설치해서 백업을 돌리면 됩니다.) curl https://static.toastoven.net/toastcloud/sdk_download/backup/scripts/linux/bootstrap.sh | bash 2. 백업 에이전트 설치 (Linux) tcbackup install {user-domain} 백업할 서버를 등록하려면 먼저 대상 서버에 에이전트를 설치해야한다. 설치할 때는 사용자의 도메인 정보가 필요한데, 도메인 정보는 서버 등록 페이지에서 확인할 수 있다. 2-1. 도메인 정보 확인하기 [Storage] -> [Backup] 에서 서버등록에서 확인 3. 설치 후 콘솔로 가서..
![[NHN Cloud] 키페어를 통해 인스턴스 접속 방법](https://img1.daumcdn.net/thumb/R750x0/?scode=mtistory2&fname=https%3A%2F%2Fblog.kakaocdn.net%2Fdn%2FbCntqL%2Fbtrgvrn3grB%2FRP31kUbHDsZC3z8Te6QxzK%2Fimg.png)
[NHN Cloud] 키페어를 통해 인스턴스 접속 방법
1. 인스턴스 생성 NHN Cloud에서 인스턴스를 생성한 후 인스턴스에 접속하려면 키페어가 꼭 있어야 한다. *키페어를 생성해서 다운로드 하여 꼭 보관해야한다. 분실 시 인스턴스에 절대 접속할 수 없다. 2. Floating IP 생성 및 인스턴스와 연결 2-1. 인스턴스와 연결 3. 인스턴스에 설정한 보안그룹에 SSH접근 추가 *여기서는 default란 이름의 보안그룹입니다. 4. SSH 접속 방법 1) MobaXterm일 경우(pem파일 그대로 사용) [Remote host] 부분에 인스턴스와 연결한 Floating IP를 적고 [Use private key] 부분에 다운받은 키페어를 파일선택한다. (다운받았던 pem파일 그대로를 올리면 된다.) 2) Putty일 경우(pem->ppk 변환 한 후 ..
![[NCP] Associate(VPC Platform) - 1강. (Compute) Compute 상품군](https://img1.daumcdn.net/thumb/R750x0/?scode=mtistory2&fname=https%3A%2F%2Fblog.kakaocdn.net%2Fdn%2FdxPMZt%2Fbtrfhecz3tX%2FszFCTnO3enhc8KbepYiwWk%2Fimg.png)
[NCP] Associate(VPC Platform) - 1강. (Compute) Compute 상품군
*본 글은 네이버클라우드플랫폼 공인교육강의를 정리한 글입니다. https://www.edwith.org/associate-vpc [서버 제공 종류] -> windows는 compact/standard부터 이용 가능 1) VDS(Virtual Dedicated Server) 단독 물리 서버에 생성된 고성능 클라우드 서버 고성능 물리 서버를 단독으로 제공하는 서비스로, 안정적으로 독차지하고 고성능으로 이용하고 싶을 때 사용! 2) CPU Intensive CPU Intensive 서버 서비스를 위한 3.0GHz의 인텔의 골드 프로세서 3) GPU Server 병렬 처리에 최적화된 GPU 서버의 고성능 컴퓨팅(딥 러닝, AI, 자율주행 등) 파워를 제공 [서버 타입 별 이용 가능 여부] [국가별 지원 서버 타..
NCP - 서버생성 및 블록스토리지 마운트와 NAS마운트
1. 서버생성 및 블록스토리지 마운트 1-1. 포트포워딩 설정 *classic에서 공인IP를 할당(요금부과됨)받아서 서버접속을 할 수 있지만, test용이기 때문에 포트포워딩 설정(요금부과 X)을 한다. 1-2. 서버 접속 1-3. 스토리지 생성 후 서버접속하여 스토리지 확인 1-4. 생성한 스토리지의 파티션 생성 1-5. 파일시스템 생성 후 파일시스템 검사 mkfs.xfs /dev/xvdb1 fsck /dev/xvdb1 * 파일시스템 생성 후 파일이 깨지지 않았는지 fsck로 확인하는 작업이 필요함 [참고] 서버 이미지에 따라 포멧 명령어가 다름 CentOS 5.x: mkfs.ext3 /dev/xvdb1 CentOS 6.x: mkfs.ext4 /dev/xvdb1 CentOS 7.x: mkfs.xfs /..