[Azure] Big DATA

이정훈·2023년 5월 10일
0

Azure

목록 보기
6/7
post-thumbnail
  • 자료활용, 정보와 데이터?
  • 정보는 가치있는 데이터, 경제적 가치가 있는 친구
    객관적 자료에 불과하지만 가치가 있는 친구 information
    수집 되어야하고 활용할 가치를 내포해야한다

Big Data란?

  • 기존 데이터베이스 관리도구로 데이터를 수집, 저장, 관리, 분석할 수 있는 역량을 넘어서 대량의 정형 또는 비정형 데이터 집합
  • 이러한 데이터로부터 가치를 추출하고 결과를 분석하는 기술을 의미
  • 빅데이터를 활용함으로서 다변화되고 개인화된 현대사회와 구성원들이 개별적으로 맞춤형 정보를 제공, 관리, 분석 가능
  • 인간이 간과 하기 쉬운 정보들을 제공하여 판단 및 결정에 도움을 제공하는 도구로 활용

활용사례

  • 서울시 버스 노선(통화 위치 확인, 택시 사용 등), 신용평가모델(핀테크, 대출, 택배 이용, 소비 등), 금융 신상품 개발(카드사의 고객맞춤 상품 출시)

Azure 빅 데이터 및 분석 서비스

  • SQL Data Warehouse : 대규모 병렬 처리를 활용하여 페타바이트 귬의 데이터에서 복잡한 쿼리를 신속하게 실행가능한 기업형 관리서비스
  • HDInsight : 하둡파일 시스템을 기반으로 방대한 양의 데이터를 더 쉽고 빠르며 비용 효율적으로 처리하기 위한 관리형 오픈소스 분석 서비스
  • Data Lake Analytics : 빅 데이터를 단순화하는 주문형 분석 작업 서비스 하드웨어를 배포하고 튜닝하는 대신 쿼리를 작성하여 데이터를 변환하고 중요한 통찰력을 추출에 활용가능

기계학습(Machine Learning)

  • "데이터를 구문 분석하고 해당 데이터를 통해 학습한 후 정보를 바탕으로 결정을 내리기 위해 학습한 내용을 적용하는 알고리즘"
  • 기능을 수행하고 개선, 학습을 진화한다.
  • 반복할 때마다 정규해저 오차비율이 줄어들도록
  • 보이스 인터페이스를 통해
  • 표현과 일반화

딥러닝

  • 머신러닝과 기능적인 차이가 있다.
  • 머신러닝은 학습을 통해 점진적으로 개선이 되어진다.
    이건 근데 사람이 개입을 해서 값들 조정?
  • 딥러닝는 자체 신경망 알고리즘 루틴을 통해 예측에 대한 적확성을 사람이 개입하지 않고 스스로 판단

Azure 기계학습 서비스

  • Machine Learning Service : 기계 학습 모델의 개발, 학습, 테스트, 배포, 관리 및 추적에 사용되는 클라우드 기반 환경을 제공
  • Machine Learning Studio : 코드를 작성할 필요 없이 끌어서 놓기 방식으로 기계 학습 솔루션을 빌드, 테스트 및 배포할 수 있는 공동 작업 기반의 시각적 작업 영역을 제공
profile
싱숭생숭늉

0개의 댓글