윈도우에서 리눅스를 위한 빅데이터 처리 분석 : BIG DATA using Spark with R

임동훈 | 2024-07-15

요즘 떠오르는 빅데이터 관련 직무 4가지를 든다면, 데이터 사이언티스트(Data Scientist), 데이터 엔지니어(Data Engineer), 데이터 분석가(Data Analyst), 머신러닝 엔지니어(Machine Learning Engineer)를 들 수 있다. 이 4가지 직무는 칼로 무 자르듯이 명확하게 구분되지는 않지만, 직무별로 필요한 역량과 기술은 저마다 조금씩 차이가 있다. 이 4가지 직무에 대한 이해를 돕기 위해 기획자와 개발자의 성향에 따라 직무를 분류해 보면, 데이터 분석가는 기획자에 가...

통계계산 : R 활용

김태수 | 2024-07-15

데이터의 홍수 속에 살아가고 있는 현대사회에서 인터넷의 발달, 스마트 기기의 보편화, 다양한 센서와 데이터 수집 기법의 발전은 매 순간 엄청난 양의 데이터를 생성하고 있다. 이러한 데이터는 그 자체로는 아무런 의미를 가지지 않지만, 적절히 수집, 분석, 해석하면 사용자에게 강력한 정보와 통찰을 제공해 준다. 이와 같은 데이터 중심의 환경에서 통계적 계산(Statistical Computing)은 필수적인 학문이자 도구로서 자리 잡고 있다. 통계적 계산은 데...

Hein 대학화학의 기초 제16판

Morris Hein 외(저) / 화학교재연구회(역) | 2024-07-01

과학은 인류의 풍요로운 삶과 편리한 생활의 근원을 마련해 준다. 화학은 과학의 일부로서 그 일부를 담당한다. 넓은 의미에서 보면, 화학은 물질의 성질과 변화를 다루는 학문으로서 존재하는 물질의 총합체인 우주에 대한 지식과 이해의 지평을 확장하는 데 핵심적 공헌을 하였다. 좁은 의미에서 보면, 화학은 일상생활에서 사용하는 다양한 물질의 결합이나 분해를 통하여 이루어지는 화합물에 대한 인간의 호기심과 일상생활을 위한 유익함과 편리함...

과학기술과 사회를 만든 사람들 : 11명의 과학자에 관한 조금 깊은 전기

송성수 | 2024-05-10

과학사 수업을 하다 보면 봉착하는 질문이 하나 있다. 조금 더 재미있게 가르치는 방법은 없을까 하는 질문이다. 여기서 ‘재미있게’가 꼭 ‘쉽게’를 뜻하는 것은 아니다. 단순한 재미보다 재미난 어려움이 더욱 가치 있는 법이다. 재밌는 과학사를 위해 종종 시도되는 방법으로는 사람 중심의 과학사, 즉 인물과학사를 들 수 있다. 역사가 어원적으로 ‘사람들의 이야기’를 뜻하므로 사람을 중시하지 않는 과학사는 어불성설에 불과하다. 게다가 인물...

나만 모르는 웹3 밈코인 소통론

박한우 | 2024-04-05

이 책을 열어주신 독자 여러분께 깊이 감사드립니다. 누구나 한 번쯤 들어봤을 법한 4차 산업혁명의 디지털 세상을 저자의 시선으로 새롭게 접근해 보았습니다. 개인과 조직뿐만 아니라 도시와 국가를 둘러싼 제반 환경이 ‘전환기’에 들어섰고, 이 기간이 지나면 승자와 패자가 분명히 구분되는 대격차가 도래함은 부인하기 힘듭니다. 이런 맥락에서 이 책을 통해 독자 여러분이 지능정보화 시대에 순탄한 삶을 살아가는 데 조금이라도 도움이 될 수 있...

강화학습 기본과 PyTorch

추상목 | 2023-11-30

신경망 공부를 하다 보면, ‘학습은 비지도 학습, 지도 학습, 그리고 강화학습으로 나뉜다. 알파고와 자율 주행차에서 사용하는 강화학습, 아이가 세상과 상호작용하면서 세상을 배우는 과정을 모방한 강화학습.’ 등과 같은 문장을 접하게 된다. 그러면서 다음과 같은 생각이 든다. ‘강화학습을 공부해 볼까?’ 그러나 이 영역으로 들어가기가 쉽지 않다: (1) 기존 신경망 학습 구조와 완전히 다르고, (2) 매우 많은 강화학습 방법을 어떤 순서로 공부해야...

alibi, lime, shap, ELI5, InterpretML을 활용한 XAI

박유성 | 2024-01-15

앙상블러닝이나 딥러닝은 예측의 정밀도 측면에서 전통적인 통계적 예측 방법론을 앞서고 있다고 해도 과언은 아니다. 이러한 예측 정밀도에도 불구하고 AI를 알지 못하는 end-user에게 이들 모형의 예측이 ‘왜?’‘어떻게?’를 설명하지 못하면, 정밀도만 높을 뿐 모형의 예측 결과가 산업현장의 의사결정에 거의 도움을 주지 못하게 된다. XAI는 AI 모형과 end-user 간의 이러한 괴리를 메꿀 뿐만 아니라 AI 모형을 투명하고(transparency) 신뢰할만하게(t...

아날로그 전자회로 설계 및 응용

최성재 | 2023-09-10

[아날로그 전자회로 설계 및 응용]은 전기공학과, 전자공학과, 반도체 설계 공학과, 전자 통신과, 제어계측과, 전자재료과, 소방안전과, 자동차과, 기계공학과, 전자 물리학과, 생명화학공학과, 나노바이오학과 등의 다양한 학과에서 전자회로의 원리와 응용 분야를 공부하는 학생들을 위해 집필되었다. 시중에 이미 다양한 형태의 전자회로 교재들이 출판되어 있지만, 대부분 물리학적인 접근법으로 집필된 경우가 많아 전자회로 이론을 해석하고 이해하...

통계학을 위한 벡터와 행렬 제2판

허 집 | 2023-08-31

오늘날에 사회현상이나 자연현상을 설명하거나 규명하는 일은 과거와 달리 그 결과가 유일하거나 단순하지 않으며, 복합적이고 방대한 계산으로 이루어진 과정이 필연적으로 동반된다. 벡터와 행렬은 이러한 상황에 대해 간단하고 명료한 수학적 표현을 제공하는 동시에 체계적인 계산을 통해 해를 찾고 이론적인 성질을 규명하는 도구로 사용된다. 확률분포를 포함한 함수의 형태로 표현한 다양한 통계적 모형은 불확실성이 내재되어 있는 여러 분야에...

공업화학 제4판

정찬문 | 2024-04-30

우리는 의약품, 화장품, 자동차, 컴퓨터, 휴대전화, 의복, 식품 등 ‘물질(materials)’로 된 다양한 제품을 사용하며 현대 문명의 풍요 속에서 살고 있다. 이러한 제품들은 모두 원료 물질로부터 화학적 원리를 이용하여 제품을 생산하는 화학 공업(chemical industry)과 밀접한 연관이 있다고 할 수 있다. 즉, 우리는 화학 공업의 혜택인 생활의 윤택함과 편리함을 만끽하면서 살고 있는 것이다. 공업 화학(industrial chemistry)은 바로 화학 공업에 있어서 화학 반응과 ...