본문 바로가기
반응형

전체 글157

[JAVA] 배열을 2차원 배열로 만드는 법 기존 테이블에서 새로운 테이블로 변환 코딩을 하다 보니 배열을 2차원 배열로 바꿔서 사용 해야 될때가 있었습니다. 다시 까먹지 않게 로직이라도 작성해 보려고 합니다. JSONParser jsonParser = new JSONParser(); ArrayList gridData = new ArrayList(); ArrayList stringData = new ArrayList(); JSONObject jaStatistics = new JSONObject(); JSONObject jo = (JSONObject) jsonParser.parse(response.getBody().toString()); JSONArray columns = (JSONArray) jsonParser.parse(jo.get("columns").toString()); Stri.. 2020. 4. 24.
[Mysql] 기본 프로시저 생성, 실행 1~2,000,000 의 값을 명령어 하나로 해결하는 방법 !! DELIMITER $$ CREATE PROCEDURE twoMillion() BEGIN DECLARE i INT DEFAULT 1; WHILE i 2020. 4. 7.
[Mysql] DB 기본 사용법 1. create database DB이름; ==> DB계정 생성 2. show databases; ==> 생성되어 있는 DB계정 확인 3. use DB이름; ==> DB계정으로 접속 4. create table 테이블이름; ==> 테이블 이름으로 테이블 생성 5. show tables; ==> 현재 접속되어 있는 DB계정의 모든 테이블 이름 확인 6. select * from 테이블이름; ==> 테이블 이름의 정보(데이타)를 검색 7. insert into 테이블이름(id, pwd) values(test, 1234); ==> 테이블 이름에 해당하는 테이블에 값을 넣음.(id, pwd)는 테이블 컬럼명을 뜻한다. 7-1. select * from 테이블이름; ==> 테이블 이름의 정보(데이타)를 검색 8.. 2020. 4. 7.
[JAVA] 자바 (JDK1.8) 설치 안녕하세요. 기존에 이클립스 설치법을 올렸는데 자바 설치법을 안올려서 이클립스 설치 전에 자바 먼저 설치를 해주셔야 됩니다. PC사양 확인 방법은 내 문서 -> 내 PC 우클릭 후 속성으로 들어가게 되면 아래와 같이 나옵니다. 아래의 링크로 들어가서 자신의 PC 사양에 맞게 다운로드를 하면 됩니다. (리눅스의 경우 getconf LONG_BIT를 치게 되면 pc비트가 나오게 됩니다.) https://www.oracle.com/java/technologies/javase/javase-jdk8-downloads.html Java SE Development Kit 8 - Downloads Java SE Development Kit 8 Downloads Thank you for downloading this r.. 2020. 3. 30.
[JAVA] 로컬에 있는 파일 하둡(Hadoop)으로 복사 일일이 파일을 HDFS에 올리는 작업을 할 수 없어서 JAVA코드로 지정해 놓은 경로에 파일이 있는 경우에 파일을 HDFS에 복사하는 코드를 작성해 보았습니다. - 개발환경 JDK 1.8 hadoop-common-2.10.0.jar (글 작성 기준 최신버전) Spring Boot 2.1.8 Spring Boot POM.xml org.apache.hadoop hadoop-common 2.10.0 jdk.tools jdk.tools org.apache.hadoop hadoop-hdfs 2.10.0 // 로컬 파일 파일 시스템에 복사 public void fileCopy() throws IOException { // hdfs://hadoop설치IP:hadoop설정포트 --> namenode 경로 String .. 2020. 3. 26.
빅데이터 기반의 분산 처리 클러스터 기능을 가진 하둡(Hadoop) 큰 크기의 데이터를 클러스터에서 병렬로 동시에 처리하여 처리 속도를 높이는 것을 목적으로 하는 분산처리를 위한 오픈소스 프레임워크라고 할 수 있습니다. 장점 : - 저렴한 구축비용과 비용대비 빠른 데이터 처리 - 일부 장비에 장애가 발생하더라도 전체 시스템 사용성에 영항이 적음 - HDFS는 데이터를 저장하면, 다수의 노드에 복제 데이터도 함께 저장해서 데이터 유실을 방지 단점 : - HDFS에 저장된 데이터를 변경 불가 - 많은 버전과 부실한 서포트, 설정의 어려움 - 서버 재부팅되면 모든 메타데이터 유실 가능성 있음 여기서 HDFS란 ? - HDFS는 Hadoop Distributed File System의 약자이다. 수십 테라바이트 또는 페타바이트 이상의 대용량 파일을 분산된 서버에 저장하고, 그 .. 2020. 3. 26.

티스토리툴바