AWS
-
[AWS] Spark 설치AWS 2021. 11. 22. 17:59
이번에는 스파크를 설치를 할텐데 그전에 java와 scala를 설치를 해야한다. 1. java 설치 및 환경 변수 1-1 java 설치 아래 코드로 설치를 진행했다. scala와 잘 연동된다 하여 버전 8을 설치했다. $ sudo apt install openjdk-8-jdk 1-2 설치 확인 $ java -version 1-3 환경 변수 설정 다음 코드로 porfile 열어주자. $ sudo nano /etc/profile 자 그럼 열게되면 밑으로 쭉내려서 아래코드 입력을 해주면 된다. export JAVA_HOME=/usr/lib/jvm/java-8-openjdk-amd64 export PATH=$JAVA_HOME/bin:$PATH export CLASS_PATH=$JAVA_HOME/lib:$CLAS..
-
[AWS]Rstudio-server 설치AWS 2021. 11. 22. 06:31
AWS에 EC2 구축 완료후 Rstudio server를 설치 하자. Rstudio는 R을 편리하게 사용가능한 환경을 만드는 프로그램 이다. Rstudio를 설치하게 되면 다른 곳에서 R환경을 편리하게 사용 할 수 있다. 1. R Base 설치 Rstudio 설치전 R,R Base를 먼저 설치해야 한다. 1-1 아래 코드로 사전 준비 Ket값을 먼저 등록하자. $ sudo apt-key adv --keyserver keyserver.ubuntu.com --recv-keys E298A3A825C0D65DFD57CBB651716619E084DAB9 $ sudo add-apt-repository ‘deb https://cloud.r-project.org/bin/linux/ubuntu bionic-cran35/..
-
AWS 환경에서 Jupyter notebook 설치 및 실행AWS 2021. 10. 7. 14:21
AWS 인스턴스 구축후 Jupyter notebook 설치 및 실행 AWS 인스턴스 구축방법은 아래 링크를 통해 알아보면 되겠다. 리눅스나 우분투 설치 방법은 같고 실행 방법도 같다.(실행코드만 살짝 다르다.) 구축하기를 했으니 바로 넘어가자. - AWS EC2 서버 구축 하기 [AWS] EC2 구축 하기 Amazon Web Services(AWS)는 전 세계적으로 분포한 데이터 센터에서 200개가 넘는 완벽한 기능의 서비스를 제공하는, 세계적으로 가장 포괄적이며, 널리 채택되고 있는 클라우드 플랫폼입니다. EC2 란? El uikang.tistory.com 위 링크는 아마존 리눅스 접속 방법이 ec2-user@탄력적 IP로 적용후 -> 이름설정 -> 세이브 -> 오픈이였다. Ubuntu는 밑에 그림을 ..
-
[AWS] EC2 메모리 설정AWS 2021. 10. 7. 13:25
이번에는 EC2의 메모리를 높이는 설정을 하려한다. 앞선 블로그에서 EC2를 구축할때 프리티어로 설정을 해두고 생성을 해버려 메모리(1GB)가 매우 낮다. 그래서 EC2에 인스턴스를 업그레이드 하고 용량을 8GB로 바꾸는 설정을 해볼것이다. 업그레이드 이유 인스턴스 유형 변경 해서 메모리를 늘려주는 이유는 메모리가 부족할 경우 특정 패키지가 설치가 안되는 경우가 있다고 들었다. 그런 경우를 대비해서 미리 업그레이드를 해주도록 하자. 인스턴스 요금제 확인 인스턴스 업그레이드 전에 요금제부터 확인하도록 하자. 요금제는 시간당 부과 되는 비용으로 서버를 키는 순간 비용이 발생한다.(서버를 키고 바로 꺼도 1분의 사용량의 요금을 부과 된다고한다.) 추천받은 요금제는 t2.large 요금제로 시간당 0.1152 ..
-
[AWS] EC2 구축 하기AWS 2021. 10. 6. 03:45
Amazon Web Services(AWS)는 전 세계적으로 분포한 데이터 센터에서 200개가 넘는 완벽한 기능의 서비스를 제공하는, 세계적으로 가장 포괄적이며, 널리 채택되고 있는 클라우드 플랫폼입니다. EC2 란? Elastic Compute Cloud의 준말로 가상의 운영체제를 만들어 사용가능하게 해주는 서비스 라고 보면 된다. 이제 부터 이곳에 R/python 을 설치에 분석 환경을 가추어 나갈 생각이다. 설치 과정을 하나씩 알아보자. Step 1. 인스턴스 생성하기 인스턴스는 클라우드의 가상 서버입니다. 서비스 -> EC2클릭 좌측 인스턴스 메뉴 -> 우측 상단 인스턴스 시작 클릭 Step 2. 인스턴스 옵션 설정 인스턴스 옵션을 정해주자. 비유를 하자면 컴퓨터살떄 사양을 선택하는 과정이다. 1..