1.常用模塊#連接數據庫connect()函數創建一個新的數據庫連接對話并返回一個新的連接實例對象PG_CONF_123={'user':'emma','port':123,'host':'192.168.1.123','password':'emma','database':'dbname'}conn=psycopg2.connect(**PG_CONF_123)#打開一個操作整個數據庫的光標連接對象可以創建光標用來執行SQL語句cur=conn.cur
系統 2019-09-27 17:52:21 1891
掃描服務器ip開放端口,用線程池ThreadPoolExecutor,i7的cpu可以開到600個左右現成,大概20s左右掃描完65535個端口,根據電腦配置適當降低線程數#!/usr/local/python3.6.3/bin/python3.6#coding=utf-8importsocketimportdatetimeimportrefromconcurrent.futuresimportThreadPoolExecutor,waitDEBUG=Fa
系統 2019-09-27 17:52:19 1891
本文實例講述了Python基于BeautifulSoup和requests實現的爬蟲功能。分享給大家供大家參考,具體如下:爬取的目標網頁:http://www.qianlima.com/zb/area_305/這是一個招投標網站,我們使用python腳本爬取紅框中的信息,包括鏈接網址、鏈接名稱、時間等三項內容。使用到的Python庫:BeautifulSoup、requests代碼如下:#-*-coding:utf-8-*-importrequestsfr
系統 2019-09-27 17:52:10 1891
2019-09-18-21:11:24(初學者不會學博客,望大家見諒見諒)今天學的內容是有關list.、dict、set集合的使用方法和注意事項list和dict在循環中不可刪,而且list在迭代輸出時進行刪除是會導致索引跟著改變所以一般list不在循環過程中進行刪除list和dict要進行刪除時,應該把要刪除的記錄到另一個列表中,然后在進行刪除深淺拷貝:淺拷貝只拷貝第一層的內容,而深拷貝是全部內容都進行了拷貝下面是總結的內容:一.重要知識點1.str.j
系統 2019-09-27 17:51:29 1891
步驟:1.掌握幾種對象及其關系2.了解每類對象的基本操作方法3.通過轉化關系轉化涉及對象1.datetime>>>importdatetime>>>now=datetime.datetime.now()>>>nowdatetime.datetime(2018,1,12,23,9,12,946118)>>>type(now)2.timestamp>>>importtime>>>time.time()1421075455.5682433.timetuple>>
系統 2019-09-27 17:51:17 1891
klearnpythonAPILinearRegressionfromsklearn.linear_modelimportLinearRegression#線性回歸#module=LinearRegression()module.fit(x,y)module.score(x,y)module.predict(test)LogisticRegressionfromsklearn.linear_modelimportLogisticRegression#邏輯回
系統 2019-09-27 17:51:04 1891
代理ProxyHandler處理器(代理)1、代理的原理:在請求目的網站之前,先請求代理服務器,然后讓代理服務器去請求目的網站,代理服務器拿到目的服務器的網站數據后,再轉發給我們的代碼。2、http://httpbin.org/ip這個網站可以方便我們查看一些http請求參數3、使用代理的方法:ProxyHandle這個方法需要傳入一個字典,key:請求schema,value:代理服務器ip+端口fromurllibimportrequest##url=
系統 2019-09-27 17:50:55 1891
最近在工作中遇到一個問題,就是有一個功能希望在各種服務器上實現,而服務器上的系統版本可能都不一樣,有的是CentOS6.x,有的是CentOS7.x。需要說明的一點是,CentOS6.x上的Python版本是2.6.x的,而CentOS7.x上的Python版本是2.7.x的,這意味著我要實現的功能要適配這兩種版本的系統。你可能會說,這有什么的,自己寫的時候,注意一下就好了。事情其實沒有那么容易,我要實現的功能是基于一個框架進行定制,需要修改不少的框架代碼
系統 2019-09-27 17:50:30 1891
文件的數據是存放于硬盤上的,因而只存在覆蓋、不存在修改這么一說,我們平時看到的修改文件,都是模擬出來的效果,具體的說有兩種實現方式。一、方式一將硬盤存放的該文件的內容全部加載到內存,在內存中是可以修改的,修改完畢后,再由內存覆蓋到硬盤(word,vim,nodpad++等編輯器)。importoswithopen('37r.txt')asfr,\open('37r_swap.txt','w')asfw:data=fr.read()#全部讀入內存,如果文件很
系統 2019-09-27 17:50:22 1891
推薦系統的相關知識我們已在前文中提到,在這篇文章中,我們會介紹如何用Python來搭建一個簡單的推薦系統。本文使用的數據集是MovieLens數據集,該數據集由明尼蘇達大學的Grouplens研究小組整理。它包含1,10和2億個評級。Movielens還有一個網站,我們可以注冊,撰寫評論并獲得電影推薦。接下來我們就開始實戰演練。在這篇文章中,我們會使用Movielens構建一個基于item的簡易的推薦系統。在開始前,第一件事就是導入pandas和numPy
系統 2019-09-27 17:50:15 1891