Python15 [텍스트 마이닝-수집] 네이버 블로그 크롤러(2) - 본문 수집 1차 크롤러 https://chocolemon.tistory.com/137 [텍스트 마이닝-수집] 네이버 블로그 크롤러(1) - 수집할 목록 만들기 텍스트 수집 자동화는 사실 '크롤러' 라고 이름 붙이기 애매하지만, 이미 크롤러 라는 단어가 일상적으로 쓰이고 있으므로 편의상 크롤러라고 칭하겠습니다. 이전에 올린 것은 코드를 반복 실행 chocolemon.tistory.com 이제 1차로 수집한 링크의 글들을 수집할 차례입니다. 제일 먼저 필요한 패키지와 모듈을 임포트합니다. import pandas as pd import numpy as np import time from tqdm.notebook import tqdm import random import urllib.request from seleniu.. 2023. 9. 17. [텍스트 마이닝-수집] 네이버 블로그 크롤러(1) - 수집할 목록 만들기 텍스트 수집 자동화는 사실 '크롤러' 라고 이름 붙이기 애매하지만, 이미 크롤러 라는 단어가 일상적으로 쓰이고 있으므로 편의상 크롤러라고 칭하겠습니다. 이전에 올린 것은 코드를 반복 실행해야 해서 함수로 만들어 편리성을 높였습니다. (↓ 이전 포스팅) https://chocolemon.tistory.com/105 [텍스트 마이닝-수집] 네이버 블로그 스크래핑 import pandas as pd import time import urllib.request from selenium.common.exceptions import NoSuchElementException, UnexpectedAlertPresentException, TimeoutException from selenium import webdrive.. 2023. 9. 15. [텍스트 마이닝-수집] 구글 학술 검색 인용 스크래핑 논문을 작성하다 보면 투고하는 학술지에 맞춰 레퍼런스 작성 양식이 달라지는 경우가 있습니다. 이럴 때 참고 문헌들의 인용을 양식에 맞는 걸로 매번 찾는다면 ... ... 엄청난 시간이 들게 되겠죠. 가뜩이나 시간도 없는데, 클릭해서 찾고, 복사하고, 붙여넣고, 다시 찾고, 복사, 붙여넣기 ... 생각만 해도 한숨이 절로 나옵니다. 컴퓨터가 알아서 참고 문헌 인용을 정리하는 동안 다른 일을 한다면 논문을 아주 빠르게 써낼 수 있을 텐데 그러지 못해 답답한 분들을 위해 구글 학술 검색 스크래핑 코드를 작성해 보았습니다. 먼저 필요한 패키지들을 임포트 해줍니다. import pandas as pd import numpy as np import time from tqdm.notebook import tqdm i.. 2023. 9. 12. [텍스트 마이닝-수집] 네이버 블로그 스크래핑 import pandas as pd import time import urllib.request from selenium.common.exceptions import NoSuchElementException, UnexpectedAlertPresentException, TimeoutException from selenium import webdriver from selenium.webdriver.common.by import By from tqdm.notebook import tqdm # 웹드라이버 설정 options = webdriver.ChromeOptions() options.add_experimental_option("excludeSwitches", ["enable-automation"]) opti.. 2023. 3. 16. [코딩 테스트] Python - 입문 - Day1, Day2 프로그래머스 코딩테스트 입문 1일차: 사칙연산 1. 두 수의 합# 사용자 정의 함수 def solution(num1, num2): answer = num1 + num2 return answer # 람다 함수 solution = lambda num1, num2: num1+num22. 두 수의 차# 사용자 정의 함수 def solution(num1, num2): answer = num1 - num2 return answer # 람다 함수 solution = lambda num1, num2: num1 - num2 3. 두 수의 곱# 사용자 정의 함수 def solution(num1, num2): answer = num1 * num2 return answer # 람다 함수 solution = lambda num.. 2023. 1. 2. 이전 1 2 다음 728x90
