아미(아름다운미소)

import pandas as pdimport numpy as np# 테스트 데이터data = {'a': ['TESTES', 'EXAMPLE', 'YESES', 'NO', np.nan, 12345]}df = pd.DataFrame(data)# 벡터화된 연산으로 'ES' 제거df['a_cleaned'] = df['a'].astype(str).str.replace(r'ES$', '', regex=True)# NaN 값을 빈 문자열로 대체 (필요한 경우)df['a_cleaned'] = df['a_cleaned'].replace('nan', '')print(df)

import pandas as pdimport numpy as np# 데이터 생성 함수def generate_string(): # '::'로 구분된 6개의 랜덤 문자열 생성 (최소 5개의 '::' 포함) parts = [f"part{i}" for i in range(6)] # 6개의 부분 문자열 생성 return "::".join(parts) # '::'로 연결# 400만 개의 데이터 생성num_rows = 4_000_000 # 400만 행data = {'a': [generate_string() for _ in range(num_rows)]}# DataFrame 생성df = pd.DataFrame(data)# 결과 확인print(df.head())chunk_size = 1_000_0..