Jovian
⭐️
Sign In
In [1]:
from iwork.pipe import *
import socket

ip = socket.gethostbyname(socket.getfqdn(socket.gethostname()))
ip
Building prefix dict from the default dictionary ... Loading model from cache /tmp/jieba.cache Loading model cost 1.391 seconds. Prefix dict has been built succesfully.
Out[1]:
'10.177.31.195'
In [ ]:
# 1. 每5分钟爬一次
# 2. 每天存文件
import time
import pendulum
import pandas as pd
from iwork.crawler.HotSpider import HotSpider


get_time = lambda t: pendulum.from_timestamp(t, 'Asia/Shanghai')

query = '正能量'
hs = HotSpider(query)

data = pd.DataFrame()
while 1:
    try:
        print("我睡一会😪💤\n")
        time.sleep(300)
        
        df = hs.df_sites_info()
        dt = get_time(time.time())
        
        if dt.add(minutes=5).date() == dt.date():
            continue
        else:
            print("我取")
            data = pd.concat([df, data]).drop_duplicates('title')
            data.to_csv("./Hotnews/positive energy: %s" % dt.date(), '\t', index=False)

    except Exception as e:
        print(e)
        continue
我睡一会😪💤 🕷:正能量 ...
HBox(children=(IntProgress(value=0, max=1), HTML(value='')))
🕷:抖音 正能量榜 https://tophub.today/n/1yjvQqDvbg 我睡一会😪💤 🕷:正能量 ...
HBox(children=(IntProgress(value=0, max=1), HTML(value='')))
🕷:抖音 正能量榜 https://tophub.today/n/1yjvQqDvbg 我睡一会😪💤 🕷:正能量 ...
HBox(children=(IntProgress(value=0, max=1), HTML(value='')))
🕷:抖音 正能量榜 https://tophub.today/n/1yjvQqDvbg 我睡一会😪💤 🕷:正能量 ...
HBox(children=(IntProgress(value=0, max=1), HTML(value='')))
🕷:抖音 正能量榜 https://tophub.today/n/1yjvQqDvbg 我睡一会😪💤 🕷:正能量 ...
HBox(children=(IntProgress(value=0, max=1), HTML(value='')))
🕷:抖音 正能量榜 https://tophub.today/n/1yjvQqDvbg 我睡一会😪💤 🕷:正能量 ...
HBox(children=(IntProgress(value=0, max=1), HTML(value='')))
🕷:抖音 正能量榜 https://tophub.today/n/1yjvQqDvbg 我睡一会😪💤 🕷:正能量 ...
HBox(children=(IntProgress(value=0, max=1), HTML(value='')))
🕷:抖音 正能量榜 https://tophub.today/n/1yjvQqDvbg 我睡一会😪💤 🕷:正能量 ...
HBox(children=(IntProgress(value=0, max=1), HTML(value='')))
🕷:抖音 正能量榜 https://tophub.today/n/1yjvQqDvbg 我睡一会😪💤 🕷:正能量 ...
HBox(children=(IntProgress(value=0, max=1), HTML(value='')))
🕷:抖音 正能量榜 https://tophub.today/n/1yjvQqDvbg 我睡一会😪💤 🕷:正能量 ...
HBox(children=(IntProgress(value=0, max=1), HTML(value='')))
🕷:抖音 正能量榜 https://tophub.today/n/1yjvQqDvbg 我睡一会😪💤 🕷:正能量 ...
HBox(children=(IntProgress(value=0, max=1), HTML(value='')))
🕷:抖音 正能量榜 https://tophub.today/n/1yjvQqDvbg 我睡一会😪💤 🕷:正能量 ...
HBox(children=(IntProgress(value=0, max=1), HTML(value='')))
🕷:抖音 正能量榜 https://tophub.today/n/1yjvQqDvbg 我睡一会😪💤 🕷:正能量 ...
HBox(children=(IntProgress(value=0, max=1), HTML(value='')))
🕷:抖音 正能量榜 https://tophub.today/n/1yjvQqDvbg 我睡一会😪💤 🕷:正能量 ...
HBox(children=(IntProgress(value=0, max=1), HTML(value='')))
🕷:抖音 正能量榜 https://tophub.today/n/1yjvQqDvbg 我睡一会😪💤 🕷:正能量 ...
HBox(children=(IntProgress(value=0, max=1), HTML(value='')))
🕷:抖音 正能量榜 https://tophub.today/n/1yjvQqDvbg 我睡一会😪💤 🕷:正能量 ...
HBox(children=(IntProgress(value=0, max=1), HTML(value='')))
🕷:抖音 正能量榜 https://tophub.today/n/1yjvQqDvbg 我睡一会😪💤 🕷:正能量 ...
HBox(children=(IntProgress(value=0, max=1), HTML(value='')))
🕷:抖音 正能量榜 https://tophub.today/n/1yjvQqDvbg 我睡一会😪💤 🕷:正能量 ...
HBox(children=(IntProgress(value=0, max=1), HTML(value='')))
🕷:抖音 正能量榜 https://tophub.today/n/1yjvQqDvbg 我睡一会😪💤 🕷:正能量 ...
HBox(children=(IntProgress(value=0, max=1), HTML(value='')))
🕷:抖音 正能量榜 https://tophub.today/n/1yjvQqDvbg 我睡一会😪💤 🕷:正能量 ...
HBox(children=(IntProgress(value=0, max=1), HTML(value='')))
🕷:抖音 正能量榜 https://tophub.today/n/1yjvQqDvbg 我睡一会😪💤 🕷:正能量 ...
HBox(children=(IntProgress(value=0, max=1), HTML(value='')))
🕷:抖音 正能量榜 https://tophub.today/n/1yjvQqDvbg 我睡一会😪💤 🕷:正能量 ...
HBox(children=(IntProgress(value=0, max=1), HTML(value='')))
🕷:抖音 正能量榜 https://tophub.today/n/1yjvQqDvbg 我睡一会😪💤 🕷:正能量 ...
HBox(children=(IntProgress(value=0, max=1), HTML(value='')))
🕷:抖音 正能量榜 https://tophub.today/n/1yjvQqDvbg 我睡一会😪💤 🕷:正能量 ...
HBox(children=(IntProgress(value=0, max=1), HTML(value='')))
🕷:抖音 正能量榜 https://tophub.today/n/1yjvQqDvbg 我睡一会😪💤 🕷:正能量 ...
HBox(children=(IntProgress(value=0, max=1), HTML(value='')))
🕷:抖音 正能量榜 https://tophub.today/n/1yjvQqDvbg 我睡一会😪💤 🕷:正能量 ...
HBox(children=(IntProgress(value=0, max=1), HTML(value='')))
🕷:抖音 正能量榜 https://tophub.today/n/1yjvQqDvbg 我睡一会😪💤 🕷:正能量 ...
HBox(children=(IntProgress(value=0, max=1), HTML(value='')))
🕷:抖音 正能量榜 https://tophub.today/n/1yjvQqDvbg 我睡一会😪💤 🕷:正能量 ...
HBox(children=(IntProgress(value=0, max=1), HTML(value='')))
🕷:抖音 正能量榜 https://tophub.today/n/1yjvQqDvbg 我睡一会😪💤 🕷:正能量 ...
HBox(children=(IntProgress(value=0, max=1), HTML(value='')))
🕷:抖音 正能量榜 https://tophub.today/n/1yjvQqDvbg 我睡一会😪💤 🕷:正能量 ...
HBox(children=(IntProgress(value=0, max=1), HTML(value='')))
🕷:抖音 正能量榜 https://tophub.today/n/1yjvQqDvbg 我睡一会😪💤 🕷:正能量 ...
HBox(children=(IntProgress(value=0, max=1), HTML(value='')))
🕷:抖音 正能量榜 https://tophub.today/n/1yjvQqDvbg 我睡一会😪💤 🕷:正能量 ...
HBox(children=(IntProgress(value=0, max=1), HTML(value='')))
🕷:抖音 正能量榜 https://tophub.today/n/1yjvQqDvbg 我睡一会😪💤 🕷:正能量 ...
HBox(children=(IntProgress(value=0, max=1), HTML(value='')))
🕷:抖音 正能量榜 https://tophub.today/n/1yjvQqDvbg 我睡一会😪💤 🕷:正能量 ...
HBox(children=(IntProgress(value=0, max=1), HTML(value='')))
🕷:抖音 正能量榜 https://tophub.today/n/1yjvQqDvbg 我睡一会😪💤 🕷:正能量 ...
HBox(children=(IntProgress(value=0, max=1), HTML(value='')))
🕷:抖音 正能量榜 https://tophub.today/n/1yjvQqDvbg 我睡一会😪💤 🕷:正能量 ...
HBox(children=(IntProgress(value=0, max=1), HTML(value='')))
🕷:抖音 正能量榜 https://tophub.today/n/1yjvQqDvbg 我睡一会😪💤 🕷:正能量 ...
HBox(children=(IntProgress(value=0, max=1), HTML(value='')))
🕷:抖音 正能量榜 https://tophub.today/n/1yjvQqDvbg 我睡一会😪💤 🕷:正能量 ...
HBox(children=(IntProgress(value=0, max=1), HTML(value='')))
🕷:抖音 正能量榜 https://tophub.today/n/1yjvQqDvbg 我睡一会😪💤 🕷:正能量 ...
HBox(children=(IntProgress(value=0, max=1), HTML(value='')))
🕷:抖音 正能量榜 https://tophub.today/n/1yjvQqDvbg 我睡一会😪💤 🕷:正能量 ...
HBox(children=(IntProgress(value=0, max=1), HTML(value='')))
🕷:抖音 正能量榜 https://tophub.today/n/1yjvQqDvbg 我睡一会😪💤 🕷:正能量 ...
HBox(children=(IntProgress(value=0, max=1), HTML(value='')))
🕷:抖音 正能量榜 https://tophub.today/n/1yjvQqDvbg 我睡一会😪💤 🕷:正能量 ...
HBox(children=(IntProgress(value=0, max=1), HTML(value='')))
🕷:抖音 正能量榜 https://tophub.today/n/1yjvQqDvbg 我睡一会😪💤 🕷:正能量 ...
HBox(children=(IntProgress(value=0, max=1), HTML(value='')))
🕷:抖音 正能量榜 https://tophub.today/n/1yjvQqDvbg 我睡一会😪💤 🕷:正能量 ...
HBox(children=(IntProgress(value=0, max=1), HTML(value='')))
🕷:抖音 正能量榜 https://tophub.today/n/1yjvQqDvbg 我睡一会😪💤 🕷:正能量 ...
HBox(children=(IntProgress(value=0, max=1), HTML(value='')))
🕷:抖音 正能量榜 https://tophub.today/n/1yjvQqDvbg 我睡一会😪💤 🕷:正能量 ...
HBox(children=(IntProgress(value=0, max=1), HTML(value='')))
🕷:抖音 正能量榜 https://tophub.today/n/1yjvQqDvbg 我睡一会😪💤 🕷:正能量 ...
HBox(children=(IntProgress(value=0, max=1), HTML(value='')))
🕷:抖音 正能量榜 https://tophub.today/n/1yjvQqDvbg 我睡一会😪💤 🕷:正能量 ...
HBox(children=(IntProgress(value=0, max=1), HTML(value='')))
🕷:抖音 正能量榜 https://tophub.today/n/1yjvQqDvbg 我睡一会😪💤 🕷:正能量 ...
HBox(children=(IntProgress(value=0, max=1), HTML(value='')))
🕷:抖音 正能量榜 https://tophub.today/n/1yjvQqDvbg 我睡一会😪💤 🕷:正能量 ...
HBox(children=(IntProgress(value=0, max=1), HTML(value='')))
🕷:抖音 正能量榜 https://tophub.today/n/1yjvQqDvbg 我睡一会😪💤 🕷:正能量 ... 🕷:HTTPSConnectionPool(host='tophub.today', port=443): Max retries exceeded with url: /search?q=%E6%AD%A3%E8%83%BD%E9%87%8F (Caused by NewConnectionError('<urllib3.connection.VerifiedHTTPSConnection object at 0x7f3d980acf98>: Failed to establish a new connection: [Errno -3] Temporary failure in name resolution',)) 'NoneType' object has no attribute 'text' 我睡一会😪💤 🕷:正能量 ...
HBox(children=(IntProgress(value=0, max=1), HTML(value='')))
🕷:抖音 正能量榜 https://tophub.today/n/1yjvQqDvbg 我睡一会😪💤 🕷:正能量 ...
HBox(children=(IntProgress(value=0, max=1), HTML(value='')))
🕷:抖音 正能量榜 https://tophub.today/n/1yjvQqDvbg 我睡一会😪💤 🕷:正能量 ...
HBox(children=(IntProgress(value=0, max=1), HTML(value='')))
🕷:抖音 正能量榜 https://tophub.today/n/1yjvQqDvbg 我睡一会😪💤 🕷:正能量 ...
HBox(children=(IntProgress(value=0, max=1), HTML(value='')))
🕷:抖音 正能量榜 https://tophub.today/n/1yjvQqDvbg 我睡一会😪💤 🕷:正能量 ...
HBox(children=(IntProgress(value=0, max=1), HTML(value='')))
🕷:抖音 正能量榜 https://tophub.today/n/1yjvQqDvbg 我睡一会😪💤 🕷:正能量 ...
HBox(children=(IntProgress(value=0, max=1), HTML(value='')))
🕷:抖音 正能量榜 https://tophub.today/n/1yjvQqDvbg 我睡一会😪💤 🕷:正能量 ...
HBox(children=(IntProgress(value=0, max=1), HTML(value='')))
🕷:抖音 正能量榜 https://tophub.today/n/1yjvQqDvbg 我睡一会😪💤 🕷:正能量 ...
HBox(children=(IntProgress(value=0, max=1), HTML(value='')))
🕷:抖音 正能量榜 https://tophub.today/n/1yjvQqDvbg 我睡一会😪💤 🕷:正能量 ...
HBox(children=(IntProgress(value=0, max=1), HTML(value='')))
🕷:抖音 正能量榜 https://tophub.today/n/1yjvQqDvbg 我睡一会😪💤 🕷:正能量 ...
HBox(children=(IntProgress(value=0, max=1), HTML(value='')))
🕷:抖音 正能量榜 https://tophub.today/n/1yjvQqDvbg 我睡一会😪💤 🕷:正能量 ...
HBox(children=(IntProgress(value=0, max=1), HTML(value='')))
🕷:抖音 正能量榜 https://tophub.today/n/1yjvQqDvbg 我睡一会😪💤 🕷:正能量 ...
HBox(children=(IntProgress(value=0, max=1), HTML(value='')))
🕷:抖音 正能量榜 https://tophub.today/n/1yjvQqDvbg 我睡一会😪💤 🕷:正能量 ...
HBox(children=(IntProgress(value=0, max=1), HTML(value='')))
🕷:抖音 正能量榜 https://tophub.today/n/1yjvQqDvbg 我睡一会😪💤 🕷:正能量 ...
HBox(children=(IntProgress(value=0, max=1), HTML(value='')))
🕷:抖音 正能量榜 https://tophub.today/n/1yjvQqDvbg 我睡一会😪💤 🕷:正能量 ...
HBox(children=(IntProgress(value=0, max=1), HTML(value='')))
🕷:抖音 正能量榜 https://tophub.today/n/1yjvQqDvbg 我睡一会😪💤 🕷:正能量 ...
HBox(children=(IntProgress(value=0, max=1), HTML(value='')))
🕷:抖音 正能量榜 https://tophub.today/n/1yjvQqDvbg 我睡一会😪💤 🕷:正能量 ...
HBox(children=(IntProgress(value=0, max=1), HTML(value='')))
🕷:抖音 正能量榜 https://tophub.today/n/1yjvQqDvbg 我睡一会😪💤 🕷:正能量 ...
HBox(children=(IntProgress(value=0, max=1), HTML(value='')))
🕷:抖音 正能量榜 https://tophub.today/n/1yjvQqDvbg 我睡一会😪💤 🕷:正能量 ...
HBox(children=(IntProgress(value=0, max=1), HTML(value='')))
🕷:抖音 正能量榜 https://tophub.today/n/1yjvQqDvbg 我睡一会😪💤 🕷:正能量 ... 🕷:500 Server Error: Internal Server Error for url: https://tophub.today/search?q=%E6%AD%A3%E8%83%BD%E9%87%8F 'NoneType' object has no attribute 'text' 我睡一会😪💤 🕷:正能量 ... 🕷:500 Server Error: Internal Server Error for url: https://tophub.today/search?q=%E6%AD%A3%E8%83%BD%E9%87%8F 'NoneType' object has no attribute 'text' 我睡一会😪💤 🕷:正能量 ...
HBox(children=(IntProgress(value=0, max=1), HTML(value='')))
🕷:抖音 正能量榜 https://tophub.today/n/1yjvQqDvbg 我睡一会😪💤 🕷:正能量 ...
HBox(children=(IntProgress(value=0, max=1), HTML(value='')))
🕷:抖音 正能量榜 https://tophub.today/n/1yjvQqDvbg 我睡一会😪💤 🕷:正能量 ...
HBox(children=(IntProgress(value=0, max=1), HTML(value='')))
🕷:抖音 正能量榜 https://tophub.today/n/1yjvQqDvbg 我睡一会😪💤
In [ ]:
import jovian
jovian.commit(env_type='pip')
[jovian] Saving notebook..
In [ ]:
 
In [ ]:
 
In [ ]:
 
In [ ]:
 
In [ ]: