목록전체 글 (154)

끄적거림

[Tips] 조건걸고 새로운 컬럼 추가하기 in Pandas DataFrame

R에서는 대부분의 핸들링을 자유롭게 하던 나는 파이썬으로 그 작업들을 하나씩 진행하고자 한다. 분석을 진행하기 위해서 데이터를 내가 원하는 모양으로 맞춰줄 필요가 있다. 현재 내가 분석을 진행하다 막힌 부분은 이렇다. 원하는 조건에 해당하면 특정 값, 아니면 다른 값으로 주어 새로운 컬럼을 만드는 것이다. R에 익숙한 나는 다음 코드를 바로 떠올릴 수 있다. iris %>% mutate(new_column = ifelse(Sepal.Length > 4, 'Large', 'Small')) 변수를 추가하는 함수인 dplyr의 mutate함수와 조건을 걸 수 있는 ifelse함수를 사용하면 간단히 만들 수 있다. 하지만 파이썬에서 이와 같은 작업을 진행하려면 어떻게 해야할까? 다음 코드와 같다. iris['n..
Python/Data Handling 2020. 8. 10. 16:47
[리뷰 크롤링] 어플 버전 history 정보 가져오기

2020/07/23 - [Python] - [리뷰 크롤링] PlayStore 댓글 크롤링하기 in python 1(feat. selenium) 2020/07/25 - [Python] - [리뷰 크롤링] PlayStore 댓글 크롤링하기 in python 2(feat. selenium) 2020/07/27 - [Python] - [리뷰 크롤링] PlayStore 댓글 크롤링하기 in python 3(feat. selenium) 2020/07/28 - [Python] - [리뷰 크롤링] PlayStore 댓글 크롤링하기 in python 4(feat. selenium) 2020/07/29 - [Python] - [리뷰 크롤링] AppStore 어플 리뷰 가져오기 1(feat. cURL) 2020/07/30 ..
Python/Crawling 2020. 8. 4. 14:08
문자열 전체 보기(show full long string in pandas DataFrame)

pd.options.display.max_colwidth = 2000 2000자까지 보기
Python 2020. 8. 1. 18:29
[리뷰 크롤링] AppStore 어플 리뷰 가져오기 3 in python(feat.RSS)

2020/07/29 - [Python] - [리뷰 크롤링] AppStore 어플 리뷰 가져오기 1(feat. cURL) 2020/07/30 - [Python] - [리뷰 크롤링] AppStore 어플 리뷰 가져오기 2 in python(feat. cURL) 1. Trouble Shooting 지난 시간들에서는 appTweak이라는 사이트에서 무료로 제공하는 API를 cURL을 사용하여 app store에서의 어플에 대한 리뷰 데이터를 가져오는 작업을 진행했었다. 그러던 중 만난 이슈는 더 많은 리뷰 데이터를 가져올 수 없다는 것! (내가 그냥 실패한 것일 수도 있지만 그래도 내가 노력하고 찾아본바에 의하면 안되는 걸로 마무리 지었다..ㅠㅠ 해결책을 아시는 분이 있다면 댓글로라도..) 2. RSS 그렇게 ..
Python/Crawling 2020. 7. 31. 14:46
[리뷰 크롤링] AppStore 어플 리뷰 가져오기 2 in python(feat. cURL)

2020/07/29 - [Python] - [리뷰 크롤링] AppStore 어플 리뷰 가져오기 1(feat. cURL) 지난 시간엔 apptweak이라는 사이트에서 제공하는 api를 이용해 앱 리뷰 데이터를 가져오는 작업을 진행했다. 단순 api 호출 성공으로 끝냈었지만, 오늘은 좀 더 내게 맞는 데이터를 이쁘게 가져올 수 있는 작업을 진행하려한다. 시작해보자! 1. Json to DataFrame 먼저, 이전시간에 test로 뽑아놓은 데이터를 활용하여 어떤 데이터를 어떤 구조로 적재할지를 생각해보고 다시 쿼리를 날릴때(데이터 수집) 어떻게 가져올지를 생각해봐야한다. 내가 한 달 안에 사용 가능한 횟수가 정해져 있기 때문에 신중해야한다. Reading Data 주어진 임시 데이터를 읽어볼 것이다. raw..
Python/Crawling 2020. 7. 30. 16:51
[리뷰 크롤링] AppStore 어플 리뷰 가져오기 1(feat. cURL)

2020/07/23 - [Python] - [리뷰 크롤링] PlayStore 댓글 크롤링하기 in python 1(feat. selenium) 2020/07/25 - [Python] - [리뷰 크롤링] PlayStore 댓글 크롤링하기 in python 2(feat. selenium) 2020/07/27 - [Python] - [리뷰 크롤링] PlayStore 댓글 크롤링하기 in python 3(feat. selenium) 2020/07/28 - [Python] - [리뷰 크롤링] PlayStore 댓글 크롤링하기 in python 4(feat. selenium) 지난 시간에는 python의 selenium이라는 패키지로 온라인상 행동을 조작하여 안드로이드의 PlayStore에서 리뷰를 크롤링 하는 것..
Python/Crawling 2020. 7. 29. 15:27
Prev 1 ··· 15 16 17 18 19 20 21 ··· 26 Next