AWS 6

AWS Forecast를 활용해 월마트 매출 예측해보기(3)

2. 준비한 데이터로 AI학습시키기 데이터가 준비되었으니 이제 데이터를 학습해 미래를 예측할 수 있는 ‘모델’을 만들어낼 차례입니다. 아마존닷컴에서 사용하는 DeepAR알고리즘 외에 ARIMA, mqrnn, prophet등11가지의 학습 알고리즘을 제공해주지만 저는 AutoML을 사용하겠습니다. AutoML은 학습 시간도 가장 오래 걸리고, 어떤 알고리즘을 사용해 학습했는지 알 수는 없습니다. 하지만 언제나 가장 높은 정확도를 가지기 때문에 의심 없이 사용하도록 하겠습니다. (automl 선택시 훈련시간 약 8시간, 배포시간 약 4시간이 소요됩니다. 나머지모델은 훈련과 배포가 약 2~4시간 소요됩니다.) 3. 결과 확인하기 (예측값 확인하기) 학습과 배포가 완료되면 다음과 같이 Active 상태가 됩니다..

AWS/AWS 정보 2022.11.07

AWS Forecast를 활용해 월마트 매출 예측해보기(2)

준비물 - 데이터, AWS Forecast, AWS S3(파일저장소), AWS Sagemaker(옵션) 1. 데이터 준비하기 https://www.kaggle.com/c/walmart-recruiting-store-sales-forecasting Walmart Recruiting - Store Sales Forecasting | Kaggle www.kaggle.com 월마트는 채용목적으로 Kaggle에 Recruiting Competition을 진행한 적이 있습니다. 저는 이때 사용된 월마트 매출 데이터를 준비했습니다. 45개 지점에 대한 2010년 2월 ~ 2011년 12월까지의 매출데이터이며, 건수는 421,571 건입니다. 이제 이 데이터들을 forecast에 업로드할 형식으로 데이터를 정제가 필요..

AWS/AWS 정보 2022.06.02

AWS Forecast를 활용해 월마트 매출 예측해보기(1)

오늘 저는 Kaggle에서 진행했던 월마트의 Sales Forecasting 챌린지 데이터로 월마트의 매출을 예측해보도록 하겠습니다. AWS Forecast란? 라스베가스에서 열린 AWS re:Invent 2018에서 발표된 서비스입니다. 컨셉은 “머신러닝 지식이 없어도 누구나 프로그래밍 없이 미래 데이터를 예측할 수 있다”입니다. 또한, amazon.com에서 실제로 사용하고 있는 검증된 알고리즘을 사용할 수 있다는 장점이 있습니다. Forecast의 사용방법은 아주 간단합니다. 아래 3단계만 수행하시면 됩니다 저희는 문제와 답안이 적힌 문제집을 준비하고, AI가 이 문제집을 보면서 문제만 넣으면 답을 알려주는 model을 생성합니다. 저희는 이 모델로 새로운 문제를 넣었을 때 답안이 맞는지 확인하면 ..

AWS/AWS 정보 2022.06.02

AWS SageMaker Notebook 사용 이점

1. 개발시간(업무시간)만 사용 - 24시간 비용을 내야하는 개발서버 대신, 사용시간에만 비용지불하는 sagemaker 인스턴스 활용 AI 개발 특성상 큰 리소스가 필요하므로, 비용적인 측면에서 개발서버보다 sagemaker가 우세 2. 빠른 개발환경 구축 가능 - R, Python, spark 등의 여러 환경을 aws에서 구축하여 제공하기 때문에 초기 개발환경 구축시간 및 구축인력 단축 가능 - 단기 poc task가 많아 개발자의 in/out이 잦은데, 그때마다 새롭게 개발환경을 구성할 필요 없이 notebook instance를 신규 생성하면 끝. 이를통해 인력 투입이 빠르게 가능해짐 3. scale in/out의 편의성 - 개발서버의 경우 자원 증설 및 단축시 downtime 발생하여, 자원 증설..

AWS/AWS 정보 2022.06.02

AWS Solution Architect Professional 벼락치기 후기(22년 06월)

벼르고벼르던 AWS Solution Architect Pro를 땄다. SAA따고 바로 보려했는데 1년뒤에 따다니.... 22년 6월1일에 합격한 따끈따끈한 후기를 남긴다. AWS SAP 공부방법 준비기간은 1주.. 덤프를 기준으로 집중 암기했다. ^^ 하루 5-6시간정도 공부했다. 내가 공부한 덤프는 BrainCert에서 $30에 판매중인 덤프다. 해당 덤프가 최신화도 잘 돼있고 적중률도 높다고해서 구매했다~~~ AWS Certified Solutions Architect Professional Practice Exams The AWS Certified Solutions Architect – Professional SAP-C01 exam validates advanced technical skills a..

AWS SAA C02 - Associate PSI 온라인 시험 후기|공부방법|점수확인

++ AWS를 실무에서 활용한건 올해 4년차정도로 기본지식과 어느정도 aws 인프라를 구축할 수 있는 수준에서 시험을 봤다. AWS SAA 공부방법 준비기간은 2주. 바짝 공부했다. 출퇴근하면서 정리한것 보고, 점심시간에 문제풀고.. 집에와서 2-3시간정도 공부했다. 빈둥대는걸 너무 좋아해서 힘든 싸움이었다.. AWS를 운영하기때문에 기본 개념은 있었지만, SAA는 이정도 수준으로 합격하는건 불가능하다. 나름 외울것도 많고 범위가 넓기 때문에, 반복학습 + 더미 풀기가 필요함.. 1. AWS FAQ 반복학습 https://aws.amazon.com/ko/faqs 거의 모든 시험의 내용이, FAQ 내용을 기반한다. 남이 정리해놓은걸 보기보다는, FAQ 내용을 내가 직접 요약하고 반복해서 보면 충분하다. 문..