- PGR21 관련된 질문 및 건의는 [건의 게시판]을 이용바랍니다.
- (2013년 3월 이전) 오래된 질문글은 [이전 질문 게시판]에 있습니다.
통합 규정을 준수해 주십시오. (2015.12.25.)
Date 2019/06/25 15:45:55
Name coke_classic
Subject SQL 질문입니다.. 외부자료를 읽는 방법을 알고 싶습니다. (수정됨)
프로그래밍은 전혀 모르는 상태이고 현 PC는 윈10이며 postgreSQL을 방금 설치하였고 외장하드로 분석해야 하는 자료를 가지고 있습니다.


--------------------------------------------------------------------------------------------
일단 저희 팀에서 약 6만건의 사람에 대한 자료를 정리해야해서 postgre sql을 정말 간단히 배우는 중입니다.
이제 쿼리라고 하나요? 명령어를 숙지해서 기본적인건 할수있겠다고 생각이 드는데...
시작하자마자 난관에 부딪혔습니다. 자료를 읽지를 못하겠습니다.

postgre sql을 제 컴퓨터(여유용량 100기가)에 설치하였고 분석해야 하는 자료(200기가)를 외장하드(1테라)에 받아왔는데,
이 상태에서 제 피씨로 이 자료들을 분석하는게 가능한가요? 빌드 한다고 하나요? 그게 되는지 ...




질문.
피씨에는 이미 postgre sql이 설치되어있고 외장하드에 자료(200기가)가 있는데 이때 데이터를 읽는게 가능한가요?



ps. 프로그래밍이 먼지 sql이 먼지 아예 모르는 사람입니다ㅠ  살려주세요.

통합규정 1.3 이용안내 인용

"Pgr에는 "명문화된 삭제규정"이 반드시 필요한 사람은 안왔으면 좋겠습니다.
법 없이도 사는 사람, 남에게 상처 안주면서 같이 이야기 나눌수 있는 분이면 좋겠습니다."
19/06/25 18:25
수정 아이콘
자료가 어떤 형태로 있느냐가 중요한데 말씀하시는거로 보면 일단 파일로 존재하는거 같구요
만약 파일이 엑셀이나 csv, 혹은 텍스트더라도 형식이 표처럼 규격화 되어있으면 db에 올릴수 있는데..
그건 db 툴마다 방법이 다 달라서 뭐라고 설명하기는 어렵네요. 기본적으론 이렇습니다.

다만 궁금한건 왜 포스트그리를 쓰느냐인데요. 제공해준 쪽에서 포스트그리에 특화된(?) 데이터라고 하던가요?
피카츄배
19/06/25 18:28
수정 아이콘
답.
가능합니다.
문제.
1. 프로그래밍 하나도 모르시면 가져와도 분석을 못하십니다.
2. 우선 데이터 형태가 csv라고 가정하면 pgAdmin이랑 shell에서 가져 올 수 있습니다. 그러니 데이터 형태를 아셔야합니다.
3. 근데 지금 데이터가 노트북 용량보다 크니까 데이터베이스를 외장하드에 설정하셔야하는데 이러면 쿼리 성능이 많이 떨어질 수 잇습니다. 저는 외장하드에서 해본적이없어서 예상이 안됩니다.
coke_classic
19/06/25 18:39
수정 아이콘
일단 간단한 SQL 언어는 배우고 있습니다.
기본적인 쿼리?는 지금 배우고 있는 중이고 가장 기초적인 명령어들로만 충분히 습득하는 걸 목표로 하고 있습니다.

자료 형태는 csv 형태입니다. csv형태의 자료를 pgAdmin 또는 sql shell 에서 가져올 수 있는 방법을 알려주시거나 링크 주실수 있으실까요? 검색해봐도 관련 지식이 없다보니 찾는거조차 어렵네요...
coke_classic
19/06/25 18:40
수정 아이콘
자료는 csv로 된 자료입니다.
일단 팀장님이 postgre SQL을 사용하면 된다라고 결정지어 주신 상황이라 그것에 의문을 가져보진 못했습니다.
피카츄배
19/06/25 18:43
수정 아이콘
pgAdmin에서는
http://www.postgresqltutorial.com/import-csv-file-into-posgresql-table/
이걸 따라하면 되실 겁니다.

근데 사용하려는 데이터 용량이 꽤 있기 때문에 벌크로 가져오셔야 할 수도 있습니다.
그리고 앞서 노트북에 용량이 적기 때문에 모든 데이터를 가져오시려면 pgAdmin에서 데이터 테이블을 외장하드로 잡아주셔야합니다.
coke_classic
19/06/25 18:52
수정 아이콘
(수정됨) 정말 감사합니다 마지막 질문 드리고 나머지는 스스로 해결해보겠습니다.

data 디렉토리를 변경하는 방법은 재설치가 가장 쉬울까요?

pgAdmin에서 데이터 테이블을 외장하드로 잡아주셔야합니다. 라고 하셨는데 이에 해당하는 옵션은 재설치가 아니라면 어디에 있는건가요?
왼쪽 메뉴창에 Servers -> PostgresSQL -> Database/Login/Group Roles/ Tablespaces 등이 있고
위쪽으로는 File, Object, Tools, Help가 있는데 해당하는 메뉴들 중 어디에 있을지 감이 오지 않습니다.
피카츄배
19/06/25 19:18
수정 아이콘
https://www.dbrnd.com/2016/08/postgresql-change-or-move-default-data-directory-in-windows-operating-system/

이 링크 참고하시면 될 거 같아요. 근데 postgresql의 경우 윈도우에서는 레지스트리를 건드려야하네요. 애먼거 건드리지 않게 조심하세요.
이오니
19/06/25 22:59
수정 아이콘
해당 자료를 그나마 알고 있으신 분에게 cvs로 뽑아달라고 해서 뽑아보세요.
엑셀로 어느정도 해당 자료를 가지고 가공이 가능하셔야 분석이 가능하실거에요.
동네형
19/06/26 12:15
수정 아이콘
(수정됨) 제가 해당 postgre를 써보진 알고 대충 알아만 보고 접었던 걸로 아는데, 반대로 postgre는 왜 설치하신건가요? 설치하셨던 이유가 있으실꺼 같은데... db나 데이터에 대한 개념이 전혀 없으신거 같은데 일단 데이터과학 책 한권 대략이라도 읽고 다시 막히는 부분서 질문하시는게 맞는거 같습니다.

본문에 대한 질문에 답하면 길게말하면 끝도 없을거 같고 짧게 말하면 당연히 됩니다.
목록 삭게로! 맨위로
번호 제목 이름 날짜 조회
공지 [질문] [삭제예정] 카테고리가 생겼습니다. [9] 유스티스 18/05/08 13761
공지 [질문] 통합 규정 2017.5.5. release 유스티스 17/05/05 21547
공지 [질문] 성인 정보를 포함하는 글에 대한 공지입니다 [37] OrBef 16/05/03 46183
공지 [질문] 19금 질문은 되도록 자제해주십시오 [8] OrBef 15/10/28 69586
공지 [질문] 통합 공지사항 + 질문 게시판 이용에 관하여. [22] 항즐이 08/07/22 111225
135721 [질문] 초보운전 및 초보운전자에 맞는 차 추천이요. [15] Cherish484 19/07/22 484
135720 [질문] 무급휴가에 대한 질문.. [1] Dunn372 19/07/22 372
135719 [질문] 다들 워라밸 어떻게 지키시나요? [17] 야옹야옹이1006 19/07/22 1006
135718 [질문] [랑그릿사]30렙 진로 문의 [10] LeNTE268 19/07/22 268
135717 [질문] 이삿짐 보관할 만한 곳이 있을까요? [2] beloved351 19/07/22 351
135716 [질문] 엑셀에서 이런 기능 만들수 있을까요? [2] 연애잘합니다398 19/07/22 398
135715 [질문] 부탁드립니다. 못배운 것을 배우고싶어요 [8] 리힛794 19/07/22 794
135714 [질문] 9년된 제 컴퓨터.. 스타 리마스터 될까요? [4] PositiveMind867 19/07/22 867
135713 [질문] 부산 숙소결정... 힐튼 or 파라다이스 [14] Hikaru993 19/07/21 993
135712 [질문] 요새 국제전화 피싱 유행하나요? [3] 강미나396 19/07/21 396
135711 [질문] 정말 귓바퀴, 귓등 안 씻는 사람이 있어요? [55] 크리스 프랳2935 19/07/21 2935
135710 [질문] 미러리스 렌즈 구입 결정장애... 질문드립니다 [11] 바보탱이280 19/07/21 280
135709 [질문] 자동차 구매 관련 질문입니다. [4] chamchI274 19/07/21 274
135708 [질문] 제로콜라말구 칼로리 없는 음료 있을까요? [17] 레너블961 19/07/21 961
135707 [질문] 등산용품 문의드립니다. Cherish76 19/07/21 76
135706 [질문] 이 친구랑 저랑 따로 봐도 되는걸까요? [18] 0ct0pu51741 19/07/21 1741
135705 [질문] 서울교통공사 NCS어렵나요...?? [6] 달달합니다866 19/07/21 866
135704 [질문] 팔 근육 운동에 대해서 [5] 타키쿤652 19/07/21 652
목록 이전 다음
댓글

+ : 최근 1시간내에 달린 댓글
+ : 최근 2시간내에 달린 댓글
맨 위로