欧美三区_成人在线免费观看视频_欧美极品少妇xxxxⅹ免费视频_a级毛片免费播放_鲁一鲁中文字幕久久_亚洲一级特黄

Python寫的一個定時重跑獲取數據庫數據

系統 1753 0

做大數據的童鞋經常會寫定時任務跑數據,由于任務之間的依賴(一般都是下游依賴上游的數據產出),所以經常會導致數據獲取失敗,因為很多人發現數據失敗后

都會去查看日志,然后手動去執行自己的任務。下面我實現了一個自動重復執行去數據庫取數,如果失敗后自動重新去獲取,直到把數據獲取到。

建數據表:

            
CREATE TABLE `testtable` ( 2 `id` int(11) unsigned NOT NULL AUTO_INCREMENT, 3 `name` varchar(20) NOT NULL, 4 PRIMARY KEY (`id`) 5 ) ENGINE=InnoDB AUTO_INCREMENT=1 DEFAULT CHARSET=utf8;
          

開始的時候數據表是空的,等到腳本重試第3秒的時候像數據庫插入數據。

以下是python代碼的實現

            
#!/usr/bin/env python
 #-*- coning:utf-8 -*- 3 4 import MySQLdb 5 from time import sleep 6 7 class GetData(object): 8 def __init__(self): 9 self.conn = '' 10 self.host = '127.0.0.1' 11 self.port = 3306 12 self.user = 'root' 13 self.passwd = '123456' 14 self.db = 'test' 15 self.cnum = 5 #set retry number 16 17 def init_connect(self): 18 self.conn = MySQLdb.connect(host=self.host, user=self.user, passwd=self.passwd, db=self.db, port=self.port, 19 charset='utf8') 20 21 def get_data(self): 22 self.init_connect 23 cur = self.conn.cursor 24 sql = "select * from testtable" 25 cur.execute(sql) 26 rs = cur.fetchall 27 cur.close 28 self.conn.close 29 return rs 30 31 def run(self): 32 count = 1 33 while (count <= self.cnum): 34 rs = self.get_data 35 if len(rs) > 0: 36 print len(rs) 37 break 38 39 print count 40 sleep(10) 41 count += 1 42 43 if __name__ == '__main__': 44 gd = GetData 45 gd.run
          

Python寫的一個定時重跑獲取數據庫數據_第1張圖片

自己可以手動執行,在代碼執行到第3秒的時候,執行下面的sql

            
insert into testtable(`name`) values ('123'),('456'),('789'),('1111'),('3222'),('444');
          

下面是定時的任務的腳本

            
00 08 * * * cd /home/python/lsh_sync; python getdata.py >> getdata.log 2>&1
          

以上所述是小編給大家介紹的Python寫的一個定時重跑獲取數據庫數據,希望對大家有所幫助,如果大家有任何疑問請給我留言,小編會及時回復大家的。在此也非常感謝大家對腳本之家網站的支持!


更多文章、技術交流、商務合作、聯系博主

微信掃碼或搜索:z360901061

微信掃一掃加我為好友

QQ號聯系: 360901061

您的支持是博主寫作最大的動力,如果您喜歡我的文章,感覺我的文章對您有幫助,請用微信掃描下面二維碼支持博主2元、5元、10元、20元等您想捐的金額吧,狠狠點擊下面給點支持吧,站長非常感激您!手機微信長按不能支付解決辦法:請將微信支付二維碼保存到相冊,切換到微信,然后點擊微信右上角掃一掃功能,選擇支付二維碼完成支付。

【本文對您有幫助就好】

您的支持是博主寫作最大的動力,如果您喜歡我的文章,感覺我的文章對您有幫助,請用微信掃描上面二維碼支持博主2元、5元、10元、自定義金額等您想捐的金額吧,站長會非常 感謝您的哦!!!

發表我的評論
最新評論 總共0條評論
主站蜘蛛池模板: 黄色综合网站 | 欧美 日韩 综合 | 精品视频第一页 | 国产一区亚洲一区 | 超碰97免费观看 | 中文字幕一区二区三区四区 | 免费精品久久 | 国产99视频在线 | 欧美日本一区 | 中文字幕在线电影观看 | 日韩视频专区 | free japan xxxxhdsex69 | 日韩视频在线观看免费视频 | 日本黄色福利视频 | 久久一区| 婷婷在线网 | 91久久99热青草国产 | 美女污污视频在线观看 | 亚洲欧美爱爱 | 国产精品久久久久久久午夜 | 午夜性刺激小说 | 欧美久久久久久久一区二区三区 | 欧美黄色大片在线观看 | 国产又黄又免费aaaa视频 | 韩国精品videosex性韩国 | 日本精品久久久久中文字幕2 | 国产欧美性综合视频性刺激 | 一级片片| 可以免费看的黄色片 | 欧美日韩久久 | 亚洲精品一区二区三区福利 | 精品推荐国产麻豆剧传媒 | 成人a视频 | 日本在线视 | 小优视频为爱而生懂你更多茄子 | 亚洲日本视频在线 | 日韩成人av在线播放 | 97超级碰碰碰视频在线视频观看 | 国产a做爰全过程片 | 级毛片| 色婷婷av久久久久久久 |