] '분류 전체보기' 카테고리의 글 목록 (46 Page)
본문 바로가기

분류 전체보기

구약의 하나님에 대한 회의론자들의 질문들 http://www.odbkorea.org/series/?mod=document&uid=167 더보기
Big Data Analysis: Hive, Spark SQL, DataFrames and GraphFrames 1주차 Computations Optimization 빅 데이터 분석을 위한 프레임 워크 Apache::Test 를 통해 Hive쿼리 속도를 높일 수 있다. Apache Spark Spark에 대한 확실한 이해를 통해 파티셔닝 및 직렬화를 배울 수 있다. Natalia가 제공하는 PageRank의 최적의 구현에서 더 나아간다. Spark SQL을 마스터하고 Catalyst를 사용하여 계산을 최적화하는 방법을 알게된다. Spark앱의 리소스를 관리스는 방법을 배운다. 페타바이트급의 데이터를 빠르게 처리하는 방법이다 수백달러 월급의 가치가 있다. What is BigData Anaysis? 데이터에서 배턴을 찾는기술 방대한 양의 데이터를 논리 그룹으로 나누고 숨겨진 구성 요소를 찾는 기능 데이터 분석 방법, 기술을.. 더보기
[Hive]하이브 입문 카카오 머신러닝, 데이터 분석가 모집 공고를 살펴보았다. 우대사항에 Hadoop M/R, Hive Spark 등 빅데이터 플랫폼 사용 경험자 가 있어서 뭔지 궁금해서 관련 도서를 빌렸다. 시립대학교 도서관에서 하이브 완벽 가이드(Programming Hive) - 한빛미디어 를 빌려 그 책 내용을 바탕으로 공부한 것을 정리하고자 한다. 분산 파일 시스템과 맵리듀스가 계산 중심의 작업에 유용한 방법이다. 하이브는 익숙한 SQL로 맵리듀스를 사용할 수 있는 빠르면서 간단한 방법을 제공한다. 하이브는 데이터양에 상관없이 공개 기술을 사용하여 데이터 웨어하우스를 구축하는 최고의 방법이다. 하이브는 SQL로 하둡을 쓸 수 있게 한다. 더보기
[ADsP](1과목)1장_3절 데이터베이스의 활용 1. 기업내부 데이터베이스 정보통신망 구축이 가속화되면서 1990년대의 기업내부 데이터베이스는 기업 경영 전반에 관한 인사, 조직, 생산, 영업, 활동 등을 포함한 모든 자료를 연계하여 일관된 체계로 구축, 운영하는 경영 활동의 기반이 되는 전사 시스템으로 확대되었다. 가. 1980년대 기업내부 데이터베이스 OLTP(On-Line Transcation Processing) : 호스트 컴퓨터와 온라인으로 접속된 여러 단말간의 처리 형태의 하나이다. 여러 단말에서 보내온 메시지에 따라 호스트 컴퓨터가 데이터베이스를 엑세스하고, 바로 처리 결과를 돌려보내는 형태를 말한다. 즉, 데이터베이스의 데이터를 수시로 갱신하는 프로세싱을 의미한다. 즉 데이터베이스의 데이터를 수시로 갱신하는 프로세싱을 의미한다. 주문입력.. 더보기
[ADsP](1과목)1장_2절 데이터베이스 정의와 특징 내가 알고 있는 데이터베이스에 대한 지식을 정리해볼게요 데이터베이스는 보통 관계형 데이터베이스(RDBMS)를 많이 쓴다. 키(key)와 값(value)가 있는 형태이다. 기업이나 관공서의 데이터를 MYSQL이나. 카산드라와 같은 데이터베이스에 저장을 한다. 데이터베이스에 저장된 데이터를 불러오는 법은 SQL으로 쿼리하여 필요한 부분만 추출하는 것이다. 교재에 나와있는 데이터베이스의 정의를 한번 살펴봅시다.~ 1차 개념확대(정형데이터 관리) - EU : 체계적이거나 조직적으로 정리되고 전자식 또는 기타 수단으로 개별적으로 접근할 수 있는 독립된 저작물, 데이터 또는 기타 소재의 수집물 - 국내 저작권법 : 소재를 체계적으로 배열 또는 구성한 편집물로서 개별적으로 그 소재에 접근하거나 그 소재를 검색할 수 .. 더보기
[ADsP](1과목)1장_1절 데이터와 정보 1과목 데이터이해 - 1장 데이터의 이해 - 1절 데이터와 정보 데이터란 무엇일까요? 데이터라는 말을 자주 쓰죠. "아 데이터 다썼네? 데이터 100GB짜리 요금제 써..?", "데이터 분석 공부하고 있습니다 " , "데이터가 너무 적어서", "데이터 전처리를 잘 해야한다. " "수치형 데이터네", " 범주형 데이터네", "데이터베이스 성적 잘 나왔어??", "독성데이터 분석하고 있습니다." "화학물질 구조에 관한 데이터", "이 물질이 active인지 inactive인지에 관한 데이터", 저는 이런식으로 데이터라는 용어를 씁니다 한번 제 생각대로 정의를 내려보면 데이터란 , 대상(사람, 물체, 물질)에 대한 특성이나 현상을 설명해주는 기록이다. 이렇게 정의를 내려봤어요. 여러분들은 어떻게 정의를 내리고.. 더보기
[ADsP]학습방향, 전체 목차 정리 안녕하세요? 데이터 분석 준전문가 시험준비를 하면서 내용들을 글로 정리 하면서 공부하려고 합니다. 책은 데이터에듀에서 나온 데이터분석 준 전문가 2019개정판을 사용했습니다. 시험은 2월 29일 토요일 10:00 에 치르구요 아직 장소는 미정입니다. 데이터 분석 준 전문가 시험문제는 1과목 데이터의 이해 (8문제) 3과목 데이터 분석 기획 (8문제) 4과목 데이터 분석 (24문제) 서술형 1,3,4과목 (10문제) 로 구성되었습니다. 각 과목당 40%미만 취득하면 과락이구요 합격기준은 총점 60점 이상입니다. 세부 목차를 적어볼게요 데이터의 이해 제 1장 데이터의 이해 1절 : 데이터와 정보 2절 : 데이터베이스 정의와 특징 3절 : 데이터베이스 활용 제 2장 데이터의 가치와 미래 1절 : 빅데이터의 이.. 더보기
CIA dev talk 2020 김기주 순장 자바 벡엔드 개발자. 유니티 C#을 이용해서 11월부터 작년 4월까지 고운시선으로 봐주지 않았다. 취미로 하면 안되냐? 서러운것도 있었고. 5월말에 취업했는데 퇴근하고 있다가 ㅏㅏ카톡이 왔다. 업데이트가 이루어졌는데 항상 가지고 싶었던 마음이.. 내가 하고 싶은 개발이 있다. 이룬것 같아서 뜻깊은 시간이였다. 내가 뭘 하고싶지?? 어떻게 해야할까? 내가 만들걸 통해서 기쁨을 주자 카카오 우아한 형제들 기회있을 때 다지이너 사운드.. 둘다 컴공 어려웠다. 유니티에서는 에셋이라는걸 판다 자기가 디자인해서 마켓에 올리면 그 디자인을 산다. 그걸 이용해서 사거나 직접 간단한건 디자인하고 사운드는 무료로 효과음 제공하는 채널.. 그런걸 이용해서.. 허재연순장 스페이스 솔루션 주임 연구원으로 일하고 있.. 더보기

티스토리툴바