우주먼지의 하루

pandas로 to_feather 을 했는데 feather 파일 아니라고 에러 뜸... 찾아보니까 버전 문제인거같다 간단하게 version = '1.0' 만 추가해주면 됨 df.to_feather("df.feather",version='1.0') 간단하게 오류 해결 ~!

매번 구글링해서 기록용으로 포스팅 from datetime import datetime start_time = datetime.now() print(start_time) end_time = datetime.now() print(end_time) time = end_time - start_time print(time)

알파벳 리스트 만들일이 있어서 찾아본 라이브러리 물론 하나하나 다 적어서 할 수 있지만 라이브러리 있는데 굳이 ! from string import ascii_lowercase alphabet_list = list(ascii_lowercase) print(alphabet_list) 이렇게 하면 알파벳 리스트 만들기 가능 !

이게 참 설명하기 어려운데 리스트에서 다른 리스트 원소가 있는지 파악하고 싶을때 쓰는 방법 my_list = ['abc' , 'bbb' , 'ddd'] matchers = ['abc','def'] 이렇게 두 개의 리스트가 있을 때, my_list 안에 matchers의 리스트에 있는 원소만 골라내고 싶을 때 !!! matching = [s for s in my_list if any(xs in s for xs in matchers)] 이렇게 사용하면 된다 !!!

Model 저장 및 불러오기 model.fit(tr_x, tr_y) #모델 저장 model.save('model.h5') #모델 불러오기 import tensorflow as tf load_model = tf.keras.models.load_model('model') Scaler 저장 및 불러오기 scaler.fit(tr_x) # scaler 저장하기 from pickle import dump dump(scaler,open('./scaler.pkl','wb')) #scaler 불러오기 from pickle import load load_scaler = load(open(./scaler.pkl,'rb'))

Python 에서 컬럼 비교할때 list 비교해서 없는것만 찾고싶은데 컬럼이 너무 많으면 환장 ! 쉽게 두 리스트 비교하는 방법을 알게 되어서 기록용 포스팅 일단 내가 하고 싶은 건 a = ['1','2','3','4'] b = ['1','2'] ----> ['3','4'] 이런식으로 두 리스트에서 다른 것만 빼내오고 싶었다 >> 코드

코딩을 제대로 배우지않은 나는... 버전 확인하는 것도 매번 구글링해서 했는데 이제는 좀 외울때가 됐다싶어서 기록 겸 외우려고 쓰는 포스팅 1.python 버전 확인 #파이썬 버전 확인 import sys sys.version #파이썬 버전 확인 !python --version 2. pip 버전 확인 #pip 버전 확인 !pip --version #pip 업그레이드 !python -m pip install --upgrade pip 3. 패키지(라이브러리,모듈...) 버전 확인 import [패키지] 패키지.__version__

지수표현식은 알아보기 너무 어려워... 그래서 지수표현식 없애고 그냥 일반적인 10진수로 보기 위한 Pandas 옵션 import pandas as pd #지수표현식 없애기 pd.options.display.float_format = '{:.5f}'.format #되돌리기 pd.reset_option('display.float_format')

매번 쓰는 건데 매번 찾아보고 코드짜서 기록 겸 외우려고 쓰는 포스팅... python에서 조건 걸어서 DataFrame 값 바꾸고 싶을 때 쓰는 방법 !! #df['a'] = 1 이면 b 열에 1을 넣어라 df.loc[(df['a']==1),'b'] = 1 #df['a'] = 1 이면 a 열에 1을 넣어라(같은 열에도 가능 !) df.loc[(df['a']==1),'a'] = 1 이번 기회로 외워서 코드 적는걸로 ~

요즘 회사에서 Hive 쓰는중 Hive SQL도 다른 SQL과 비슷해서 쓰는데 어려움은 없다 어쨌든 hive 쿼리로 python에서 DB 쓸때 필요해서 기록용 포스팅 from pyhive import hive #hive 라이브러리 import pandas as pd #DataFrame 만들어주기 #연결시키기 conn = hive.Connection(host='ip주소',port='포트',auth='권한?!',username='username',password='password') #쿼리날리기 cursor = conn.cursor() cursor.execute('query') result = cursor.fetchall() #column 들고오기 col = [column[0] for column in cu..