전체 글 검색 결과

해당 글 47건

슈퍼컴퓨터 #3

과학기술 4차인재양성과정 데이터분석가과정 한국과학기술정보연구원 - 연구원님 OpenMP OpenMP : 사실상의 표준. 요즘 정말 많이 쓰기 때문에 표준이라고 부른다. 컴파일러에 영향을 받기 때문에 컴파일러가 지원을 해 줘야하는데, 아마 R과 Python의 병렬처리는 OpenMP컴파일러가 지원을 안 할 거고 MPI가 지원을 할 것인데 결국 이것도 문법이 조금 다른거지 모든 문제는 비슷비슷하다. 오늘 배울 내용은 C나 Portran기반. MPI는 좀더 low. 여러 시스템에 걸쳐 R이든 Python이든 MPI 시스템을 돌려야 함. MPI가 하는 일은 컴퓨터를 여러 대에 걸쳐 병렬처리를 하는 건데, 데이터를 뒤진다 쳐도 한 컴퓨터가 다 뒤지는게 아니라 여러 컴퓨터가 각자 파트를 나눠서 검색을 하고 그 결과를..
KISTI 빅데이터 분석가 과정/슈퍼컴퓨터 2019. 8. 12. 10:51

슈퍼컴퓨터 #2

과학기술 4차인재양성과정 데이터분석가과정 한국과학기술정보연구원 - 연구원님 5호기 슈퍼컴퓨터(누리온) 활용 Supercomputer? - 범용 컴퓨터로 풀 수 없는 큰 문제럴 더 빠르고, 더 정확하게 계산하는 컴퓨터 -당대의 기술로 가능한 최고 성능의 컴퓨터. -절대적 기준이 없으며 상대적인 성능 비교로 순위 따져서 구분함. TOP 500 List (www.top500.org) 인트라 노드 (Intra Node) 프로세서(PC) - Clock, CPI(파이프라이닝, 슈퍼스칼라, FMA, Vector 연산) 메모리 - 계층 구조 (L1/L2/L3 캐시), 대역폭 > 인터 노드 (Inter Node) 네트워크(Network) 결국 슈퍼컴퓨터 인트라노드의 CPU하나가 데스크탑 하나인 셈이고 성능도 큰 차이 없..
KISTI 빅데이터 분석가 과정/슈퍼컴퓨터 2019. 8. 8. 10:50

슈퍼컴퓨터 #1

과학기술 4차인재양성과정 데이터분석가과정 한국과학기술정보연구원 - 연구원님 리눅스 환경설정, linux역사, 명령어 연습, vi편집기, 셸 스크립트, make명령에 관해 배울 예정. 오늘 내용은 강의 첫 주 리눅스 수업 들었던 것과 일부 겹치는 내용이 있을 듯 해 해당 부분은 뺄 예정이다. putty활용 - ssh접속 putty로 host연결하여 open한 뒤 각자 제공받은 ID와 OTP, Password로 접속했다. PBS Interactive 작업제출 - 누리온 시스템은 debug 노드 대신 debug 큐를 제공 - /scratch 디렉터리에서 작업 제출 해야 한다 - debug 큐를 이용하여 작업을 제출함으로써 디버깅 수행이가능하다. >> qsub-I 여러명이 쓰는 것이다 보니 내가 원하는 만큼의 ..
KISTI 빅데이터 분석가 과정/슈퍼컴퓨터 2019. 8. 7. 10:33

재난재해 데이터 #2

과학기술 4차인재양성과정 데이터분석가과정 한국과학기술정보연구원 장동민 연구원님 과학적 가시화 (Scientific Visualization) : 정상적으로는 볼 수 없는 실제 물질을 컴퓨터로 나타내는 것 바람, 공기, 유체, 분자 등의 눈으로는 볼 수 없는 것을 컴퓨터 처리로 형상화 하는 것 => 직관적 통찰이 가능해진다 Vapor (Visualization and Analysis Platform for Ocean, atmosphere and solar Research) :: 유체역학적 시뮬레이션을 통해 방대한 자료를 가시화하고 분석하기 위해 사용한다. (ex. 침수, 기상, ..) 사용 예시 ) 태풍의 이동 표시 Vapor의 여러 기능 Model - specific Support - Atmospheri..
KISTI 빅데이터 분석가 과정/데이터분석 2019. 7. 23. 11:27

재난재해 데이터 #1

과학기술 4차인재양성과정 빅데이터 분석가 과정 GeoDesign Solution Engineer 석상묵 Manager 재난재해 데이터 수업이라 명명되어있기는 하나 오늘은 GIS의 개념을 집중적으로 보고, 오후에 4가지 정도 데이터 분석. 마지막에는 최근의 트렌드인 GeoAI를 설명하고 마칠 예정이다. GIS Overview John Snow's Cholera Map 에서 정보를 담은 지도의 개념이 시작되었다. 콜레라가 대기오염이 원인이라고 생각 하던 당시, 각종 대기오염 관련 정책이 전혀 효과가 없자 콜레라 사망자를 지도상에 점으로 찍어 나타내어 패턴을 보고자 하였고 콜레라는 수질오염으로부터 발생한다는 전제를 갖고 지도를 그리기 시작했다. 사망자가 몰린 지역에 특정 수도펌프가 있음을 찾아냈고, 특히 무더..
KISTI 빅데이터 분석가 과정/데이터분석 2019. 7. 22. 10:54

천문데이터 #4

4차인재 양성사업 과학기술 빅데이터 분석가 과정 한국천문연구원 최성환 fitsfile.FitsFile() 패키지명?클래스와 같은 이름의 펑션이 실행되면 클래스 내부에 정의된 함수가 아니고 __init__파트가 실행이 된다. f1 = fitsfile.FitsFile() d1 = f1.loadfile("aia.~~~~.fits") FitsFile 안의 __init__을 보면 return이 없는데 이 부분은 예외적으로 ㅡㄹ래스 내부의 인스턴스(변수)가 반환되도록 약속되어있는 예외적인 파트라고 한다. 함수는 늘 리턴값이 있는데 예외적인 부분? 첫번째 라인 실행결과는 즉 f1에 FitsFile() 내부 인스턴스가 담긴 상태 f1.load_file 이면 f1이 갖고 있는 load_file을 실행한다는 뜻. 로드를 ..
KISTI 빅데이터 분석가 과정/데이터분석 2019. 7. 18. 11:48