분류 전체보기 (17) 썸네일형 리스트형 Hadoop 사용 Port Ports Hadoop App Port Hosts Notes Hadoop HDFS NameNode 8020 analytics1001,analytics1002 Hadoop HDFS over HTTP (HTTPFS) 14000 analytics1001,analytics1002 Hadoop HDFS NameNode HTTP UI 50070 analytics1001,analytics1002 Hadoop HDFS NameNode HTTPS UI 50470 analytics1001,analytics1002 Hadoop HDFS HA JournalNode 8485 analytics1028,analytics1035,analytics1052 Hadoop HDFS DataNode 50010 analytics1028-ana.. Mesos를 Standalone으로 돌리기 Mesos에 익숙하지 않은 사람은 Apache Mesos 프로젝트 사이트를 읽어보세요.. 개략적으로 설명드리면 Mesos는 클러스터 관리 플랫폼으로 여러대의 서버를 하나의 공유 Pool로 합치는 역할을 합니다. 여기서 Hadoop, 젠틴스, 카산드라, ElasticSearch 같은 어플리케이션이나 프레임워크를 돌릴 수 있습니다. Mesos는 아주 효과적으로 부하를 분산하고 배치 작업이나 long-running 서비스에게 독립적인 리소스를 제공합니다. Mesos용으로 빌드된 어플리케이션이나 프레임워크는 Mesos site에서 확인하세요. 추가적으로 Mesosphere Marathon과 ZooKeeper가 설치되어야합니다. Marathon은 long-running 서비스를 위한 프레임워크입니다. long-r.. Spark 빌드하기 원문: http://spark.apache.org/docs/latest/Spark는 pre-build 바이너리를 사용해서도 설치가 가능하나 여기서는 Ubuntu 14.04에서 직접 빌드하는 것을 알아보도록 하겠습니다.빌드를 위해서는 먼저 Maven 3.3.3 이상 그리고 Java 7 이상이 필요합니다.Maven이 설치되어 있지 않다면 먼저 아래 방법에 따라 먼저 maven 3를 설치합니다. 우선 maven 3 repository를 등록해야합니다.sudo -H gedit /etc/apt/sources.list아래 라인을 sources.list 파일에 추가합니다.deb http://ppa.launchpad.net/natecarlson/maven3/ubuntu precise maindeb-src http://.. Ubuntu에 Hadoop Single Node로 설치하기 머신러닝을 돌려보려고해도 환경이 구축되지 않으면 어렵습니다.대부분 Clustering 환경에서 돌아가기 때문엔 서버가 여러대가 필요하지만 여기서는 집에서도 간단하게 공부할 수 있도록 Ubuntu 14.04에 Hadoop을 Single-Node로 설치하는 법을 알아보겠습니다. 먼저 Java를 설치해야합니다. 여기에서는 OpenJDK 1.7을 설치했지만 Oracle JDK나 1.8을 사용하셔도 무방합니다.k@laptop:~$ cd ~ # Update the source list k@laptop:~$ sudo apt-get update # The OpenJDK project is the default version of Java # that is provided from a supported Ubuntu re.. 4.13 총선 결과는 Dislike 정치의 시작이다. 4.13 총선 결과는 모두의 예상을 뒤집고 여당이었던 새누리 당이 원내1당을 더민주에게 1석차로 내주었습니다. (더민주 123석, 새누리 122석)하지만 결과를 자세히 살펴보면 석연치 않은 부분이 많습니다.더민주가 이겼다고는 하지만 전통적인 텃밭인 전라도에서는 국민의 당에게 참패를 했기 때문입니다. 전체적인 결과를 한마디로 정리하면 Dislike 정치의 시작입니다.국민들은 기존의 지지 정당에 대한 불신이 커졌고 결국 차선을 선택한 샘입니다.새누리당의 기존 지지기반인 영남, 서울, 수도권에서는 더민주의 약진이 두드러졌고더민주의 기존 지지기반인 전라에서는 국민의 당의 약진이 두드러졌습니다. 이러한 결과를 국민들이 현재의 정치권에대해서 얼마나 불신과 실망이 큰지를 여지없이 보여주지만다르게 보면 일관되게 차선을.. Convolution(컨볼루션, 콘볼루션) Convolution(컨볼루션, 콘볼루션) 신호처리를 전공하는 사람에게 있어서 가장 기본이 되고 중요한 개념이 바로 convolution일 것이다.Convolution이란 어떤 신호가 시스템을 거쳐 결과를 얻고자 할 때 사용되는 개념으로 input f(t)와 system g(t)의 *로 나타낸다.즉 입력이 시스템을 지날 때 콘볼루션 연산을 통하여 결과를 얻게되는 것이다. 그림으로 표현하자면 아래와 같다.impluse function이 input으로 들어가 어떤 시스템과 convolution 연산이 되면 그림과 같은 결과를 얻게된다.첫번째와 두번째 그림은 f(t)*g(t) = g(t) * f(t) 임을 나타낸 것으로 순서가 바뀌어도 결과가 같음을 알 수 있다. 그럼 convolution in time fo.. 푸리에 변환 Fourier transform 푸리에 변환 '푸리에 변환'(Fourier transform)이란 '시간 영역'(time domain)의 함수를 '주파수 영역'(frequency domain)의 함수로 변환하는 것 또는 그 변환된 것을 뜻한다. 시간 t의 어떤 함수 x(t)가 있을 때 이를 주파수 영역으로 푸리에 변환한 주파수 f의 함수 X(f)는 다음과 같다. 여기서, j = √-1이며 x(t)의 값은 실수인데 반해 X(f)의 값은 실수와 허수를 갖는 복소수가 된다. 이제는 반대로, 주파수 영역의 함수 X(f)를 시간 영역으로 변환하는 '푸리에 역 변환'(inverse Fourier transrom)의 공식은 다음과 같다. 두 공식은 서로 비슷하며 지수 함수의 지수의 부호가 다른 특징을 갖는다. 이 푸리에 변환은 다음과 같은 공식들의.. 존재감 잃은 Y 염색체 얼마전 기사에서 "존재감 잃은 Y 염색체"라는 보도가 나왔습니다. http://biz.chosun.com/site/data/html_dir/2016/01/29/2016012901770.html Y 염색체를 제거한 생쥐에서 손자가 태어났다는 기사입니다. 제가 Y 염색체는 아담에게 부여된 영생의 염색체라고 이전에 적었었고,그렇기 때문에 아들을 낳아서 대를 이어나가는 것이 남자의 의무라고 했습니다. 위 기사를 보시고 Y 염색체의 의미가 퇴색되면 저의 논리가 잘못된 것이 아니냐고 반문하시는 분들이 많은데,Y 염색체의 퇴색은 하느님이 인간을 하늘 나라로 불러 들이는 시기가 가까워 지고 있다는 것을 의미합니다. 이미 X 염색체는 예수님의 구원을 받아서 하늘나라로 올라가게됩니다.이젠 Y 염색체까지도 하늘나라로 올라갈.. 이전 1 2 3 다음