크림즈 R&D

Amazon Web Services(AWS) Elastic Compute Cloud(EC2)는 클라우드에서 가상 서버를 제공하는 서비스이다. EC2 인스턴스는 클라우드 환경에서 실행되는 가상 머신으로, 서버를 프로비저닝하고 애플리케이션을 실행하는 데 사용된다. EC2 인스턴스는 운영 체제(OS)와 애플리케이션을 실행하는 데 필요한 다양한 자원을 포함한다. 이러한 자원들은 모두 클라우드에서 관리되기 때문에, 인스턴스의 상태 및 성능을 모니터링하고 최적화해야 한다. 이를 위해 AWS는 EC2 모니터링 지표를 제공한다. EC2 모니터링 지표는 CloudWatch를 통해 제공되며, 인스턴스의 상태와 성능을 실시간으로 모니터링할 수 있다. 이를 통해 인스턴스의 성능 문제를 조기에 파악하여 사용자 경험을 향상시키고..

요즘 회사에서 많이 사용하고 있는 AWS 서비스중 하나이다 그것은 AWS Step Function 옆에 직원이 이거 좋아보인다고해서 어떤서비스지 하면서 알아보다가 알게된 서비스인데 사용성, 생산성, 직관성 개인적으로 괜찮은 서비스 인거 같아서 입문편으로 정리 해볼까해요!!! 뭐 AWS 서비스 설명엔 이렇다고 합니다. 쉽게 설명하면 AWS 다양한 서비스를 역어서 쉽게 파이프라인을 구축하고 서비스 생성을 할수있는 서비스라고 보면될꺼 같아요 오늘 필자는 AWS Step Function을 이용하여 AWS Lambda 서비스를 Step 별로 실행할수 있는 간단한 파이프라인을 구축해보겠습니다. 우선 AWS 계정이 필수적으로 필요하니 계정이 있다는 기준으로 글을 써볼께요 AWS Console에 로그인을 합니다. 그러..

CDK Module 선분석 일단 Athena에 해당되는 CDK module이 있는지 봅니다. 먼저 CDK API 문서를 엽니다: API Reference · AWS CDK 그리고 Athena를 찾아서 overview page를 엽니다: @aws-cdk/aws-athena module · AWS CDK 보면 다음과 같이 나와있습니다. 이렇게 CFN-resource만 있으므로 이 CDK code는 CloudFormation (CFN)의 wrapper 수준이라는 것을 알 수 있습니다. 자세한 사항은 CFN의 Athena module을 참고해야 합니다. CFN doc: AWS resource and property types reference - AWS CloudFormation CFN Athena doc: A..

AWS Lambda를 활용한 tar 압축 및 해제 작업 AWS Lambda는 서버리스 컴퓨팅 환경에서 코드를 실행할 수 있는 서비스로, 파일 처리 작업을 자동화하는 데 유용하게 사용될 수 있습니다. 이번 글에서는 Python을 사용하여 tar 압축 및 해제 작업을 AWS Lambda 함수로 구현하는 방법을 알아보겠습니다. 또한, tar 압축 시 arcname 옵션의 활용에 대해서도 다룰 것입니다. 이 글을 작성하는 이유는, 회사에서 AWS Lambda tar 파일 압축해서 S3에 업로드를 하는데 자꾸 /tmp라는 Dir로 압축이 되는 거예요!!! 그래서 이놈을 어떻게 뺄 수 있을까 고민을 하다가 찾게 되었습니다. 이놈인데 이걸 이렇게 이쁘게 만드는 방법 한번 해보겠습니다. tar 압축 함수 아래는 tar..

AWS Autogluon AWS Autogluon is a machine learning (ML) framework that automates the process of developing highly accurate ML models. Autogluon is designed to simplify the complex process of model selection and hyperparameter tuning, which can be time-consuming and require significant expertise. Autogluon is built on top of Apache MXNet, a popular deep learning framework, and offers an easy-to-us..

AWS CodeWhisperer? 인공 지능 기반 프로그래밍 코드 생성 서비스 Amazon CodeWhisperer 미리 보기 출시 – 인공 지능 기반 프로그래밍 코드 생성 서비스 | Amazon Web Services 한국 블로그 VS Code, PyCharm 등 지원 Amazon CodeWhisperer 미리 보기 출시 – 인공 지능 기반 프로그래밍 코드 생성 서비스 | Amazon Web Services 이 글을 쓸 준비를 하면서 제 경력 동안 사용했던 몇 가지 코딩 도구들에 대해 생각해 보았습니다. 제가 중학생 때 사용했던 BASIC 인터프리터의 본질적인 부분이었던 라인 기반 에디터, 대학에 aws.amazon.com 설치 방법 아직 개발 중인 서비스라 등록이 필요 서비스 등록 Amazon Cod..

AWS EC2 EBS 볼륨 증설하기 AWS 콘솔에서 먼저 EBS 늘리기 작업순서는 아래와 같이 이루어진다 AWS 콘솔에 로그인합니다. EC2 콘솔로 이동합니다. EC2 대시보드에서 볼륨을 추가할 인스턴스를 선택합니다. "EBS 볼륨 추가"를 클릭합니다. 필요한 옵션을 선택합니다. 예를 들어, 용량, 스토리지 유형 등을 선택할 수 있습니다. "추가"를 클릭합니다. 새로운 EBS 볼륨이 EC2 인스턴스에 연결되었는지 확인합니다. EC2 인스턴스에 로그인하여, 새로운 볼륨을 인식할 수 있도록 파일 시스템을 생성하거나 마운트합니다. 볼륨을 인스턴스에 연결한 후, 해당 볼륨을 사용하여 데이터를 저장하거나 프로그램을 설치할 수 있습니다. 또한 EBS 스냅샷을 생성하여 데이터를 백업하고 복원할 수 있습니다. 일단 여..

0. auto gluon 이란 ? - aws에서 개발한 ML 이다. - 무슨 모델을 선택할지 정하지 않고 ML를 만들 수 있다. - 특정 모델을 선택해서 ML를 만들 수 있다. from autogluon.tabular import TabularDataset, TabularPredictor 1-1. 학습 데이터를 불러온다. train_data = TabularDataset('https://autogluon.s3.amazonaws.com/datasets/Inc/train.csv') subsample_size = 500 train_data = train_data.sample(n=subsample_size, random_state=0) train_data.head() – train_data = TabularDa..

실습 과정 VPC Endpoint 생성 → Private Rest API 생성→ 프록시 Lambda 생성 → Private Rest API 서비스 및 메소드 생성 → VPC 권한 정책 수정 → Rest API 배포 [ Private Rest API 생성하기 ] AWS VPC Endpoint 생성 [ VPC Endpoint 생성 ] API Gateway 용 VPC 엔드포인드 생성이 필요 통신 하고자 하는 VPC 와 연결 필요 [ Execute api 서비스 엔드포인트 생성 ] 서비스 이름을 execute로 검색후 execute-api 선택 VPC 항목에 연결하고자 하는 VPC ID 선택 AWS 콘솔에서 API Gateway 검색 후 신규 API 생성 [ API 생성 클릭 ][ Rest Api Private..

AWS Lambda 서비스는 상당히 많은 곳에서 사용이 된다. 이 과정에서 AWS 서버스가 아닌, 다른 서버스랑 연동할때 라이브러리 IMPORT 가 필수적이다. 오늘은 라이브러리 AWS Lambda, Python Import Library 하는 방법을 알아보겠다. 1. 먼저 라이브러리를 받는다. ( pip install ) - 라이브러리 다운로드 # pip install pymongo - 라이브러리 경로 확인 # pip show pymongo 2. pip show pymongo에서 조회 된 경로로 이동한다. 그리고 해당 파일을 찾아서 복사해 다른 경로로 이동시킨다. ( 나는 바탕화면으로 복사해 붙여놓음 ) 3. 해당 폴더를 아래와 같이 2번 묶어준다. 아래 __pycache__는 지워주어도 된다. 4. ..