MJay

1주차라서 짧게 설명하셨다. 4차 혁명의 핵심은 AI 와 BigData 와 Machine Learning이다. 자연어 처리도 빅 데이터 분석이랑 머신러닝 기법 을 쓴다. -> 자연어 처리 아래서부터 보면 국어기초자료가 있다. 보면 언어사전 태그부착 말뭉치, 형태소분석 등등 거의 기초자료가 많다. 위로 올라가면 국어처리기술 및 관리체계가 있다. 형태소 분석을 하고 개체명 인식을 한다. 개체명 인식이란 Name Identity 를 뜻한다 예로 들면 Obama, Trump이 있다. 개체명이 장소인지 이름인지도 인식하는게 개체명 인식이다. 예로 들면 KookMin(Location , Name) 이 2가지 의미가 있을 수 있는데 국민대에서 밥을 먹었다는 건 장소를 뜻하고 국민대학교의 위치는 국민대학교 라는 이름을..

CloudWatch의 처음 시작 화면이다 옆 메뉴를 보면 Alarm이 있다. Alarm을 설정해서 사용자가 지정해준 무언가를 하면 Alaram이 일어나게 할수있다. 원하는 Service를 지정해서 예로 들면 Total Estimated Charge라는 서비스를 지정해서 Charge 어느 이상이면 Create Alarm하게 하면 된다. Instance의 경우 DiskWrite DiskRead등등 여러가지 Metric의 기준을 Alarm 기준으로 지정할수있다. 예로 들면 Invocations이 몇번 이상 일어나면 Alarm이 일어나게 할수 있다. Event는 어떤 event가 일어날때 Targets를 invoke해주는 기능이다. Event는 ec2, rds,lambda 등등 여러가지가 될수있다. Target..

2번째로 주최하는 데이터베이스 소사이어티 학교에 갔다. 작년에는 한양대에서 딥러닝 및 추천기술에 배웠다. 이번 주제도 비슷한 딥러닝과 빅데이터였다. 집이 고대랑 가까워서 금방 도착하였다. 작년과는 다르게 디저트가 매우 고급스러워졌다. 오예스에서 머핀으로 업그레이드 되서 놀랐다. 강의실에 들어가 보니 모든 자리가 꽉 찼다. 1회에서도 인기가 많았는데 이번에도 사람들이 많이 온 걸 보고 잘 왔다고 생각이 들었다. 9시에 포항공대 유환조 교수님께서 스타트를 끓으셨다. AI와 Machine Learning이 무엇인지에 대한 강의였다. 많고 재밌는 예제를 보면서 쉽게 쉽게 이해할 수 있었다. 그리고 기계 학습의 기초 개념인 Linear Predictor, Loss Minimization, Stochastic Gr..

2c0ffa7149810378947b26bd641e5a19_spark_lesson_1_slidesSpark의 구조에 대해서 알아봅시다스팍 프로그램은 일반적으로 Driver Program이라고 한다.Drive Program은 수 백개의 병렬적인 작업(Worker Nodes)으로 나누어진다.Spark의 WorkerNode에 있는 Executor에서 실행된다. Executor는 Java Virtual Machine이다 Java Virtual Machine은 Mapping, Reducing 이나 다른 Spark 작업을 할 대 사용된다 Java Virtual Machine은 HDFS랑 연결되있다. Spark는 Computional Jobs를 HDFS에 있는 Data로 보낸다 예로 들어보자 아마존은 1tb를 가지고..

11시까지 동우랑 왔다. 잠와 죽는 줄 알았다.GSDC란 Global Science expermental Data hub Center이다.오늘은 OT만 했는데 주로 CERN와 Grid Computing 얘기였다.CERN란 CERN 은 유럽 입자 물리 연구소이다.CERN은 설립 초기부터 입자 가속기 등을 이용해, 고 에너지 물리학 연구에 많은 기여를 하였다. 또한 물리학자들의 문헌 검색 및 제휴를 위하여 고안된 HTML과 월드 와이드 웹의 발상지로도 유명하다.Grid Computing이란그리드 컴퓨팅(grid computing)은 최근 활발히 연구가 진행되고 있는 분산 병렬 컴퓨팅의 한 분야로서, 원거리 통신망(WAN, Wide Area Network)으로 연결된 서로 다른 기종의(heterogeneous..

먼저Access School Gateway로 접속을 한다ssh group07@134.75.126.46 -p 4280그리고 vm-example을 보면 이와같다masternode 한개와 worker node 4개가 있다.nova list을 입력해보면 Running 하는 Noder가 표시된다.여기서 masternode에 다시 ssh를 통해 들어가보겠다. 설치를 끝내고 kird에 지정해준 조에 맞게 ssh를 통해 접속 그 안에 1개의 master node와 3개의 worker node로 이루어져있다. 여기서 master node로 접속한다cluster.conf를 만들어서 적어보자cluster.conf를 만들어서 적어보자 UID는 Domain Name을 뜻한다. CONDOR_HOST는 Master-Node 를 뜻..

수료증을 받았다. 분산/병렬 처리 이 분야를 택하길 잘했다 서울대 물리학과생에 대단함을 느꼈다. 책을 많이 읽어야겠다. 또한 7조(Me)가 협력을 제일 잘해서 Best Communication Awards를 받고 문화상품권 1만원을 받았다. 이런 기회있으면 또 가고싶다.

출처Clouding은 모든 분야에서 성장할 것이라고 합니다. 아래 하단에서는 cloud computing이 53%나 성장할꺼라고 합니다만약 저만의 Information Systems 를 꾸리고 있다면 여러가지 귀찮은 점이 많습니다. 고정비용, 높은 에너지 비용, 낮은 CPU 이용, 유지보수비용이 듭니다. 심지어 1000개의 pc를 사용한다면 이 중 몇개는 고장날 것이고 신경써야할께 많습니다.public utility -> 공공의 시설 1961년에 John mcCarthy는 computing이 공공시설로 쓰인다고 예견했습니다.이 그림은 NIST에서 설명한 그림입니다 Ubiqutuos, On-Demand NetWork Access -> 아무데서나 24/7으로 사용할수있다. Rapid Provisioned -..

출처클라우드 컴퓨팅을 공부하면서 App Engine을 듣고 무엇인지 궁금해서 찾아보기로 했다.App Engine이란?구글의 남아도는 리소스를 사용해서 자신이 제작한 웹 어플리케이션을 구글의 무한한 인프라 위에서 동작할수 해주는 엔진이다프로그래 입장에서 서버 관리등 귀찮은 일을 안 해도 된다.사용법을 봐봅시다SDK /Eclipse Plugin 설치앱 엔진이 자바를 지원하면서 SDK 및 Eclipse 플러그인 등 여러 편의를 제공하고 있어 쉽게 개발 환경을 만들수 있다.Eclipse에서 설치 방법HELP > “ Install new Software …”http://dl.google.com/eclipse/plugin/3.*이클립스 버젼에 따라 다르다Europa – 3.3 , Ganymede-3.4, Galil..

Seminar준비를 하다보니 중요한 부분만 캡쳐를 할 기회가 생겨서 사진위주로 정리를 해봤다.