꿈꾸는 사람.

[문제] 타이타닉 선실 등급별 상위10명의 생존율을 구하라.상황: 승객들의 생존율을 분석하고 있다. 문제: 선실 등급(Pclass)별로 나이(Age)가 가장 많은 상위 10명을 뽑은 후, 그들의 평균 생존율(Survived)을 구하시오.핵심 포인트: 그룹별로 정렬 기준(나이)과 집계 대상(생존율)이 다른 경우이다.데이터셋: 타이타닉 생존자 (캐글 csv 파일 이용)[풀이 요약]본 문제의 핵심은 groupby를 두 번 쓰는 것이다.보통 groupby는 한 번만 쓰지만 '데이터 필터링(추출)과 '데이터 집계(계산)'의 단계가 다르기 때문에 groupby를 두 번 사용해야 원하는 결과를 얻을 수 있다.전체적인 로직은 타이타닉 데이터셋을 입력 받아 먼저 필터링하고, 줄어든 데이터를 다시 계산하는 2단계로 이루어..

개요모든 테이블은 가로 행과 세로 열로 구성되며, 각 열의 첫 번째 값으로 해당 열 이름이 명시적으로 쓰여진 공통된 구조가 많다.이런 테이블을 전문적으로 다루는 패키지가 판다스(Pandas)이다. 판다스는 1차원의 Series와 2차원인 DataFrame의 자료 구조를 가진다.아래 그림은 서울 공유자전기 따릉이에 대한 사용 정보를 가진 데이터셋의 일부이다. 하나의 개별 열을 가져오는 방법은 아래와 같다. 여러 열을 동시에 선택하는 방법을 개별 열을 가져오는 것과 같이 하면 오류가 나며 리스트로 가져와야 한다. 왜 df['대여시간', '사용시간'] 는 오류가 나고 df[['대여시간', '사용시간']] 는 동작하는가? 구문 내부에서 전달되는 keyDataFrame.__getitem__(key) 가 기대하는..

Pandas란 무엇인가?Pandas는 Python에서 데이터 분석과 조작을 위한 고수준의 데이터 구조와 도구를 제공하는 오픈소스 라이브러리이다.Pandas는 특히 구조화된 데이터(예: 테이블 형태의 데이터)를 처리하는 데 최적화되어 있어 데이터 분석, 정리, 변환 및 시각화를 효율적으로 수행할 수 있다.Pandas는 NumPy를 기반으로 하며, 데이터프레임(DataFrame)과 시리즈(Series)라는 두 가지 주요 데이터 구조를 제공한다. 주요 개념Series:일차원 배열과 유사하며, 데이터와 데이터의 인덱스를 함께 저장한다.Python의 리스트나 NumPy 배열에 인덱스를 추가한 것과 비슷하다.import pandas as pds = pd.Series([10, 20, 30], index=['a', '..

pandas.DataFrame.mode() 사용하기 mode 함수는 주어진 데이터셋의 행/열의 가장 자주 나타나는 값인 최빈값을 구하는 함수이다. 최빈값이 여러개일 경우 모두 표시한다. 이 때, 최빈값 이외의 값은 NaN을 출력한다. 사용 예::titanic의 학습 데이터셋에 mode() 사용하기 데이터셋은 kaggle에서 다음과 같이 받으면 된다. info() 함수와 describe()함수를 이용하여 확인한 타이타닉 학습 데이터의 기본 정보는 다음과 같다. 먼저 Cabin 열의 고유한 항목 수를 value_counts() 함수로 확인한다. print(train['Cabin'].value_counts()) output>>> B96 B98 4 G6 4 C23 C25 C27 4 C22 C26 3 최빈값을 찾..

인공지능 모델을 개발하고 웹으로 간단히 테스트할 목적으로 flask를 사용하려 한다. powershell에서 가상 환경을 만들고 flask를 설치하려고 한다. 가상 환경 설치 C:> python3 -m venv venv Python3 사용할 때 권장하는 명령 C:> pip install virtualenv Python2 사용할 때 권장하는 명령 가상 환경 활성화 활성화 명령 > venv\Scripts\activate 비활성화 명령 (venv) > deactivate 실제 활성화 명령을 실행했을 때 아래 문제 발생 활성화 명령이 실패한 원인 가상화 실행 명령은 스크립트를 실행해야 하는데 PowerShell이 이를 제한하기 때문이다. PowerShell 실행 정책 PowerShell의 실행 정책은 Power..

배경 4차 산업 혁명의 요소 기술 중 사물인터넷(IoT)이 데이터를 생성하고, 빅 데이터(Big data)rk 이렇게 생성된 방대한 데이터를 처리하며, 인공지능이 인간을 대신하여 스스로 최적의 해법을 제시한다. 또한, 클라우드 컴튜팅이 데이터 저장, 처리 등에 가상화된 컴퓨팅 리소스를 즉시 제공(on-demand)하기 위해 사용된다. 이런 요소 기술에서 공통이 테이터이며 비 기술적인 관계자들은 종종 데이터를 더 쉽게 이해하기 위해 맞춤형이며 대화형 시각화를 위해 동적 대시보드를 원한다. 데이터를 다루는 대시보드는 다음 네 가지 기능은 최소한으로 제공하여야 한다. 분석: Numpy, Panda, SciPy와 같은 핵심 패키지를 통한 데이터 분석, 조작과 요약한다. 시각화: 다양한 그래프 라이브러리를 사용하..

개요 제안서를 쓰거나 설계를 할 때 아키텍처가 필수 요소이다. 전체 시스템 개요를 설명하고 시스템 아키텍처를 작성한다. 지금까지는 시스템 아키텍처는 마이크로 소프트의 비지오와 같은 디자인 도구로 그리거나 파워포인트를 사용했다. 하지만 다이어그램 패키지를 사용하면 파이썬 코드에서 시스템 아키텍처를 그릴 수 있다. 다이어그램 패키지는 AWS, Azure, GCP 등 주요 클라우드와 온프레미스 노드 및 주요 프로그래밍 프레임워크도 지원한다. 설치하기 1. Python 3.6 이상 설치 2. graphviz 설치 3. diagram 패키지 설치 # using pip (pip3) $ pip install diagrams # using pipenv $ pipenv install diagrams # using poe..

구글의 텐서플로를 배우려면 파이썬을 먼저 설치해야 한다. 1. 파이썬 다운로드 파이썬 홈페이지(https://www.python.org/)에서 64비트 버전(https://www.python.org/downloads/windows/)을 다운로드한다. 2. 파이썬 설치하기 인스톨러를 실행하고 [Customize installation]을 선택하여 개발에 필요한 도구와 환경을 한 번에 설정한다. 파이썬 패키지 관리 프로그램인 pip와 IDE 환경은 반드시 설치한다. 파이썬이 어디에서나 실행되도록 환경변수에 추가한다. 성공적으로 설치가 끝났다. 3. 파이썬 실행하기 프로그램 메뉴에서 파이썬을 찾아 [Python 3.7(64-bit)]를 실행한다. 실행 후 간단히 튜토리얼을 실행하고 동작을 확인한다.