Learn practical skills, build real-world projects, and advance your career
Created 5 years ago
from iwork.pipe import *
import socket
ip = socket.gethostbyname(socket.getfqdn(socket.gethostname()))
ip
Building prefix dict from the default dictionary ...
Loading model from cache /tmp/jieba.cache
Loading model cost 1.391 seconds.
Prefix dict has been built succesfully.
'10.177.31.195'
# 1. 每5分钟爬一次
# 2. 每天存文件
import time
import pendulum
import pandas as pd
from iwork.crawler.HotSpider import HotSpider
get_time = lambda t: pendulum.from_timestamp(t, 'Asia/Shanghai')
query = '正能量'
hs = HotSpider(query)
data = pd.DataFrame()
while 1:
try:
print("我睡一会😪💤\n")
time.sleep(300)
df = hs.df_sites_info()
dt = get_time(time.time())
if dt.add(minutes=5).date() == dt.date():
continue
else:
print("我取")
data = pd.concat([df, data]).drop_duplicates('title')
data.to_csv("./Hotnews/positive energy: %s" % dt.date(), '\t', index=False)
except Exception as e:
print(e)
continue
我睡一会😪💤
🕷:正能量 ...
HBox(children=(IntProgress(value=0, max=1), HTML(value='')))
🕷:抖音 正能量榜 https://tophub.today/n/1yjvQqDvbg
我睡一会😪💤
🕷:正能量 ...
HBox(children=(IntProgress(value=0, max=1), HTML(value='')))
🕷:抖音 正能量榜 https://tophub.today/n/1yjvQqDvbg
我睡一会😪💤
🕷:正能量 ...
HBox(children=(IntProgress(value=0, max=1), HTML(value='')))
🕷:抖音 正能量榜 https://tophub.today/n/1yjvQqDvbg
我睡一会😪💤
🕷:正能量 ...
HBox(children=(IntProgress(value=0, max=1), HTML(value='')))
🕷:抖音 正能量榜 https://tophub.today/n/1yjvQqDvbg
我睡一会😪💤
🕷:正能量 ...
HBox(children=(IntProgress(value=0, max=1), HTML(value='')))
🕷:抖音 正能量榜 https://tophub.today/n/1yjvQqDvbg
我睡一会😪💤
🕷:正能量 ...
HBox(children=(IntProgress(value=0, max=1), HTML(value='')))
🕷:抖音 正能量榜 https://tophub.today/n/1yjvQqDvbg
我睡一会😪💤
🕷:正能量 ...
HBox(children=(IntProgress(value=0, max=1), HTML(value='')))
🕷:抖音 正能量榜 https://tophub.today/n/1yjvQqDvbg
我睡一会😪💤
🕷:正能量 ...
HBox(children=(IntProgress(value=0, max=1), HTML(value='')))
🕷:抖音 正能量榜 https://tophub.today/n/1yjvQqDvbg
我睡一会😪💤
🕷:正能量 ...
HBox(children=(IntProgress(value=0, max=1), HTML(value='')))
🕷:抖音 正能量榜 https://tophub.today/n/1yjvQqDvbg
我睡一会😪💤
🕷:正能量 ...
HBox(children=(IntProgress(value=0, max=1), HTML(value='')))
🕷:抖音 正能量榜 https://tophub.today/n/1yjvQqDvbg
我睡一会😪💤
🕷:正能量 ...
HBox(children=(IntProgress(value=0, max=1), HTML(value='')))
🕷:抖音 正能量榜 https://tophub.today/n/1yjvQqDvbg
我睡一会😪💤
🕷:正能量 ...
HBox(children=(IntProgress(value=0, max=1), HTML(value='')))
🕷:抖音 正能量榜 https://tophub.today/n/1yjvQqDvbg
我睡一会😪💤
🕷:正能量 ...
HBox(children=(IntProgress(value=0, max=1), HTML(value='')))
🕷:抖音 正能量榜 https://tophub.today/n/1yjvQqDvbg
我睡一会😪💤
🕷:正能量 ...
HBox(children=(IntProgress(value=0, max=1), HTML(value='')))
🕷:抖音 正能量榜 https://tophub.today/n/1yjvQqDvbg
我睡一会😪💤
🕷:正能量 ...
HBox(children=(IntProgress(value=0, max=1), HTML(value='')))
🕷:抖音 正能量榜 https://tophub.today/n/1yjvQqDvbg
我睡一会😪💤
🕷:正能量 ...
HBox(children=(IntProgress(value=0, max=1), HTML(value='')))
🕷:抖音 正能量榜 https://tophub.today/n/1yjvQqDvbg
我睡一会😪💤
🕷:正能量 ...
HBox(children=(IntProgress(value=0, max=1), HTML(value='')))
🕷:抖音 正能量榜 https://tophub.today/n/1yjvQqDvbg
我睡一会😪💤
🕷:正能量 ...
HBox(children=(IntProgress(value=0, max=1), HTML(value='')))
🕷:抖音 正能量榜 https://tophub.today/n/1yjvQqDvbg
我睡一会😪💤
🕷:正能量 ...
HBox(children=(IntProgress(value=0, max=1), HTML(value='')))
🕷:抖音 正能量榜 https://tophub.today/n/1yjvQqDvbg
我睡一会😪💤
🕷:正能量 ...
HBox(children=(IntProgress(value=0, max=1), HTML(value='')))
🕷:抖音 正能量榜 https://tophub.today/n/1yjvQqDvbg
我睡一会😪💤
🕷:正能量 ...
HBox(children=(IntProgress(value=0, max=1), HTML(value='')))
🕷:抖音 正能量榜 https://tophub.today/n/1yjvQqDvbg
我睡一会😪💤
🕷:正能量 ...
HBox(children=(IntProgress(value=0, max=1), HTML(value='')))
🕷:抖音 正能量榜 https://tophub.today/n/1yjvQqDvbg
我睡一会😪💤
🕷:正能量 ...
HBox(children=(IntProgress(value=0, max=1), HTML(value='')))
🕷:抖音 正能量榜 https://tophub.today/n/1yjvQqDvbg
我睡一会😪💤
🕷:正能量 ...
HBox(children=(IntProgress(value=0, max=1), HTML(value='')))
🕷:抖音 正能量榜 https://tophub.today/n/1yjvQqDvbg
我睡一会😪💤
🕷:正能量 ...
HBox(children=(IntProgress(value=0, max=1), HTML(value='')))
🕷:抖音 正能量榜 https://tophub.today/n/1yjvQqDvbg
我睡一会😪💤
🕷:正能量 ...
HBox(children=(IntProgress(value=0, max=1), HTML(value='')))
🕷:抖音 正能量榜 https://tophub.today/n/1yjvQqDvbg
我睡一会😪💤
🕷:正能量 ...
HBox(children=(IntProgress(value=0, max=1), HTML(value='')))
🕷:抖音 正能量榜 https://tophub.today/n/1yjvQqDvbg
我睡一会😪💤
🕷:正能量 ...
HBox(children=(IntProgress(value=0, max=1), HTML(value='')))
🕷:抖音 正能量榜 https://tophub.today/n/1yjvQqDvbg
我睡一会😪💤
🕷:正能量 ...
HBox(children=(IntProgress(value=0, max=1), HTML(value='')))
🕷:抖音 正能量榜 https://tophub.today/n/1yjvQqDvbg
我睡一会😪💤
🕷:正能量 ...
HBox(children=(IntProgress(value=0, max=1), HTML(value='')))
🕷:抖音 正能量榜 https://tophub.today/n/1yjvQqDvbg
我睡一会😪💤
🕷:正能量 ...
HBox(children=(IntProgress(value=0, max=1), HTML(value='')))
🕷:抖音 正能量榜 https://tophub.today/n/1yjvQqDvbg
我睡一会😪💤
🕷:正能量 ...
HBox(children=(IntProgress(value=0, max=1), HTML(value='')))
🕷:抖音 正能量榜 https://tophub.today/n/1yjvQqDvbg
我睡一会😪💤
🕷:正能量 ...
HBox(children=(IntProgress(value=0, max=1), HTML(value='')))
🕷:抖音 正能量榜 https://tophub.today/n/1yjvQqDvbg
我睡一会😪💤
🕷:正能量 ...
HBox(children=(IntProgress(value=0, max=1), HTML(value='')))
🕷:抖音 正能量榜 https://tophub.today/n/1yjvQqDvbg
我睡一会😪💤
🕷:正能量 ...
HBox(children=(IntProgress(value=0, max=1), HTML(value='')))
🕷:抖音 正能量榜 https://tophub.today/n/1yjvQqDvbg
我睡一会😪💤
🕷:正能量 ...
HBox(children=(IntProgress(value=0, max=1), HTML(value='')))
🕷:抖音 正能量榜 https://tophub.today/n/1yjvQqDvbg
我睡一会😪💤
🕷:正能量 ...
HBox(children=(IntProgress(value=0, max=1), HTML(value='')))
🕷:抖音 正能量榜 https://tophub.today/n/1yjvQqDvbg
我睡一会😪💤
🕷:正能量 ...
HBox(children=(IntProgress(value=0, max=1), HTML(value='')))
🕷:抖音 正能量榜 https://tophub.today/n/1yjvQqDvbg
我睡一会😪💤
🕷:正能量 ...
HBox(children=(IntProgress(value=0, max=1), HTML(value='')))
🕷:抖音 正能量榜 https://tophub.today/n/1yjvQqDvbg
我睡一会😪💤
🕷:正能量 ...
HBox(children=(IntProgress(value=0, max=1), HTML(value='')))
🕷:抖音 正能量榜 https://tophub.today/n/1yjvQqDvbg
我睡一会😪💤
🕷:正能量 ...
HBox(children=(IntProgress(value=0, max=1), HTML(value='')))
🕷:抖音 正能量榜 https://tophub.today/n/1yjvQqDvbg
我睡一会😪💤
🕷:正能量 ...
HBox(children=(IntProgress(value=0, max=1), HTML(value='')))
🕷:抖音 正能量榜 https://tophub.today/n/1yjvQqDvbg
我睡一会😪💤
🕷:正能量 ...
HBox(children=(IntProgress(value=0, max=1), HTML(value='')))
🕷:抖音 正能量榜 https://tophub.today/n/1yjvQqDvbg
我睡一会😪💤
🕷:正能量 ...
HBox(children=(IntProgress(value=0, max=1), HTML(value='')))
🕷:抖音 正能量榜 https://tophub.today/n/1yjvQqDvbg
我睡一会😪💤
🕷:正能量 ...
HBox(children=(IntProgress(value=0, max=1), HTML(value='')))
🕷:抖音 正能量榜 https://tophub.today/n/1yjvQqDvbg
我睡一会😪💤
🕷:正能量 ...
HBox(children=(IntProgress(value=0, max=1), HTML(value='')))
🕷:抖音 正能量榜 https://tophub.today/n/1yjvQqDvbg
我睡一会😪💤
🕷:正能量 ...
HBox(children=(IntProgress(value=0, max=1), HTML(value='')))
🕷:抖音 正能量榜 https://tophub.today/n/1yjvQqDvbg
我睡一会😪💤
🕷:正能量 ...
HBox(children=(IntProgress(value=0, max=1), HTML(value='')))
🕷:抖音 正能量榜 https://tophub.today/n/1yjvQqDvbg
我睡一会😪💤
🕷:正能量 ...
HBox(children=(IntProgress(value=0, max=1), HTML(value='')))
🕷:抖音 正能量榜 https://tophub.today/n/1yjvQqDvbg
我睡一会😪💤
🕷:正能量 ...
HBox(children=(IntProgress(value=0, max=1), HTML(value='')))
🕷:抖音 正能量榜 https://tophub.today/n/1yjvQqDvbg
我睡一会😪💤
🕷:正能量 ...
🕷:HTTPSConnectionPool(host='tophub.today', port=443): Max retries exceeded with url: /search?q=%E6%AD%A3%E8%83%BD%E9%87%8F (Caused by NewConnectionError('<urllib3.connection.VerifiedHTTPSConnection object at 0x7f3d980acf98>: Failed to establish a new connection: [Errno -3] Temporary failure in name resolution',))
'NoneType' object has no attribute 'text'
我睡一会😪💤
🕷:正能量 ...
HBox(children=(IntProgress(value=0, max=1), HTML(value='')))
🕷:抖音 正能量榜 https://tophub.today/n/1yjvQqDvbg
我睡一会😪💤
🕷:正能量 ...
HBox(children=(IntProgress(value=0, max=1), HTML(value='')))
🕷:抖音 正能量榜 https://tophub.today/n/1yjvQqDvbg
我睡一会😪💤
🕷:正能量 ...
HBox(children=(IntProgress(value=0, max=1), HTML(value='')))
🕷:抖音 正能量榜 https://tophub.today/n/1yjvQqDvbg
我睡一会😪💤
🕷:正能量 ...
HBox(children=(IntProgress(value=0, max=1), HTML(value='')))
🕷:抖音 正能量榜 https://tophub.today/n/1yjvQqDvbg
我睡一会😪💤
🕷:正能量 ...
HBox(children=(IntProgress(value=0, max=1), HTML(value='')))
🕷:抖音 正能量榜 https://tophub.today/n/1yjvQqDvbg
我睡一会😪💤
🕷:正能量 ...
HBox(children=(IntProgress(value=0, max=1), HTML(value='')))
🕷:抖音 正能量榜 https://tophub.today/n/1yjvQqDvbg
我睡一会😪💤
🕷:正能量 ...
HBox(children=(IntProgress(value=0, max=1), HTML(value='')))
🕷:抖音 正能量榜 https://tophub.today/n/1yjvQqDvbg
我睡一会😪💤
🕷:正能量 ...
HBox(children=(IntProgress(value=0, max=1), HTML(value='')))
🕷:抖音 正能量榜 https://tophub.today/n/1yjvQqDvbg
我睡一会😪💤
🕷:正能量 ...
HBox(children=(IntProgress(value=0, max=1), HTML(value='')))
🕷:抖音 正能量榜 https://tophub.today/n/1yjvQqDvbg
我睡一会😪💤
🕷:正能量 ...
HBox(children=(IntProgress(value=0, max=1), HTML(value='')))
🕷:抖音 正能量榜 https://tophub.today/n/1yjvQqDvbg
我睡一会😪💤
🕷:正能量 ...
HBox(children=(IntProgress(value=0, max=1), HTML(value='')))
🕷:抖音 正能量榜 https://tophub.today/n/1yjvQqDvbg
我睡一会😪💤
🕷:正能量 ...
HBox(children=(IntProgress(value=0, max=1), HTML(value='')))
🕷:抖音 正能量榜 https://tophub.today/n/1yjvQqDvbg
我睡一会😪💤
🕷:正能量 ...
HBox(children=(IntProgress(value=0, max=1), HTML(value='')))
🕷:抖音 正能量榜 https://tophub.today/n/1yjvQqDvbg
我睡一会😪💤
🕷:正能量 ...
HBox(children=(IntProgress(value=0, max=1), HTML(value='')))
🕷:抖音 正能量榜 https://tophub.today/n/1yjvQqDvbg
我睡一会😪💤
🕷:正能量 ...
HBox(children=(IntProgress(value=0, max=1), HTML(value='')))
🕷:抖音 正能量榜 https://tophub.today/n/1yjvQqDvbg
我睡一会😪💤
🕷:正能量 ...
HBox(children=(IntProgress(value=0, max=1), HTML(value='')))
🕷:抖音 正能量榜 https://tophub.today/n/1yjvQqDvbg
我睡一会😪💤
🕷:正能量 ...
HBox(children=(IntProgress(value=0, max=1), HTML(value='')))
🕷:抖音 正能量榜 https://tophub.today/n/1yjvQqDvbg
我睡一会😪💤
🕷:正能量 ...
HBox(children=(IntProgress(value=0, max=1), HTML(value='')))
🕷:抖音 正能量榜 https://tophub.today/n/1yjvQqDvbg
我睡一会😪💤
🕷:正能量 ...
HBox(children=(IntProgress(value=0, max=1), HTML(value='')))
🕷:抖音 正能量榜 https://tophub.today/n/1yjvQqDvbg
我睡一会😪💤
🕷:正能量 ...
🕷:500 Server Error: Internal Server Error for url: https://tophub.today/search?q=%E6%AD%A3%E8%83%BD%E9%87%8F
'NoneType' object has no attribute 'text'
我睡一会😪💤
🕷:正能量 ...
🕷:500 Server Error: Internal Server Error for url: https://tophub.today/search?q=%E6%AD%A3%E8%83%BD%E9%87%8F
'NoneType' object has no attribute 'text'
我睡一会😪💤
🕷:正能量 ...
HBox(children=(IntProgress(value=0, max=1), HTML(value='')))
🕷:抖音 正能量榜 https://tophub.today/n/1yjvQqDvbg
我睡一会😪💤
🕷:正能量 ...
HBox(children=(IntProgress(value=0, max=1), HTML(value='')))
🕷:抖音 正能量榜 https://tophub.today/n/1yjvQqDvbg
我睡一会😪💤
🕷:正能量 ...
HBox(children=(IntProgress(value=0, max=1), HTML(value='')))
🕷:抖音 正能量榜 https://tophub.today/n/1yjvQqDvbg
我睡一会😪💤
import jovian
jovian.commit(env_type='pip')
[jovian] Saving notebook..