Python 爬蟲面試題 170 道

最近在刷面試題，看了網絡上大量的 Python 相關面試題后，我發現了這幾個問題：

• 有些還是 Python2 的代碼

• 回答的很簡單，關鍵的題目沒有點出為什么

• 一些復制粘貼的代碼根本就跑不通

這幾個問題相信大家深有體會吧，所以我決定針對市面上大多的 Python 題目做一個分析，同時也希望大家盡可能的做到舉一反三，而不是局限于題目本身。

通過本場我分享的這篇文章，你將獲得如下知識點：

• 掌握 Python 的基礎語法

• 語法常見的 Python 應用場景

• 掌握 Python 閉包的使用以及裝飾器的使用

• 生成器和迭代器的使用

• 常見的設計模式的使用

• 深淺拷貝的區別

• 線程、進程、協程的使用

• 了解 Python 中的元編程和反射

• 常考的數據結構和算法

• 爬蟲相關知識，網絡編程基本知識等

限于篇幅，答案不能全部展示

獲取 170 道 Python 爬蟲面試題答案

https://gitbook.cn/gitchat/activity/5cf8ca61da0c2c41ee4697ff?utm_source=chat190705

01

所有題目

語言特性

1. 談談對 Python 和其他語言的區別

2. 簡述解釋型和編譯型編程語言

3. Python 的解釋器種類以及相關特點？

4. 說說你知道的Python3 和 Python2 之間的區別？

5. Python3 和 Python2 中 int 和 long 區別？

6. xrange 和 range 的區別？

編碼規范

7. 什么是 PEP8?

8. 了解 Python 之禪么？

9. 了解 docstring 么？

10. 了解類型注解么？

11. 例舉你知道 Python 對象的命名規范，例如方法或者類等

12. Python 中的注釋有幾種？

13. 如何優雅的給一個函數加注釋？

14. 如何給變量加注釋？

15. Python 代碼縮進中是否支持 Tab 鍵和空格混用。

16. 是否可以在一句 import 中導入多個庫?

17. 在給 Py 文件命名的時候需要注意什么?

18. 例舉幾個規范 Python 代碼風格的工具

02

數據類型

字符串

19. 列舉 Python 中的基本數據類型？

20. 如何區別可變數據類型和不可變數據類型

21. 將"hello world"轉換為首字母大寫"Hello World"

22. 如何檢測字符串中只含有數字?

23. 將字符串"ilovechina"進行反轉

24. Python 中的字符串格式化方式你知道哪些？

25. 有一個字符串開頭和末尾都有空格，比如“ adabdw ”,要求寫一個函數把這個字符串的前后空格都去掉。

26. 獲取字符串”123456“最后的兩個字符。

27. 一個編碼為 GBK 的字符串 S，要將其轉成 UTF-8 編碼的字符串，應如何操作？

28. (1)s=“info：xiaoZhang 33 shandong”，用正則切分字符串輸出’info’, ‘xiaoZhang’, ‘33’, ‘shandong’ a = "你好 中國 "，去除多余空格只留一個空格。

29. (1)怎樣將字符串轉換為小寫 (2)單引號、雙引號、三引號的區別？

列表

30. 已知 AList = [1,2,3,1,2],對 AList 列表元素去重，寫出具體過程。

31. 如何實現 “1,2,3” 變成 [“1”,“2”,“3”]

32. 給定兩個 list，A 和 B，找出相同元素和不同元素

33. [[1,2],[3,4],[5,6]]一行代碼展開該列表，得出[1,2,3,4,5,6]

34. 合并列表[1,5,7,9]和[2,2,6,8]

35. 如何打亂一個列表的元素？

字典

36. 字典操作中 del 和 pop 有什么區別

37. 按照字典的內的年齡排序

38. 請合并下面兩個字典 a = {“A”:1,“B”:2},b = {“C”:3,“D”:4}

39. 如何使用生成式的方式生成一個字典，寫一段功能代碼。

40. 如何把元組(“a”,“b”)和元組(1,2)，變為字典{“a”:1,“b”:2}

綜合

41. Python 常用的數據結構的類型及其特性？

42. 如何交換字典 {“A”：1,“B”：2}的鍵和值？

43. Python 里面如何實現 tuple 和 list 的轉換？

44. 我們知道對于列表可以使用切片操作進行部分元素的選擇，那么如何對生成器類型的對象實現相同的功能呢？

45. 請將[i for i in range(3)]改成生成器

46. a="hello"和 b="你好"編碼成 bytes 類型

47. 下面的代碼輸出結果是什么？

48. 下面的代碼輸出的結果是什么?

03

操作類題目

49. Python 交換兩個變量的值

50. 在讀文件操作的時候會使用 read、readline 或者 readlines，簡述它們各自的作用

51. json 序列化時，可以處理的數據類型有哪些？如何定制支持 datetime 類型？

52. json 序列化時，默認遇到中文會轉換成 unicode，如果想要保留中文怎么辦？

53. 有兩個磁盤文件 A 和 B，各存放一行字母，要求把這兩個文件中的信息合并(按字母順序排列)，輸出到一個新文件 C 中。

54. 如果當前的日期為 20190530，要求寫一個函數輸出 N 天后的日期，(比如 N 為 2，則輸出 20190601)。

55. 寫一個函數，接收整數參數 n，返回一個函數，函數的功能是把函數的參數和 n 相乘并把結果返回。

56. 下面代碼會存在什么問題，如何改進？

57. 一行代碼輸出 1-100 之間的所有偶數。

58. with 語句的作用，寫一段代碼？

59. python 字典和 json 字符串相互轉化方法

60. 請寫一個 Python 邏輯，計算一個文件中的大寫字母數量

61. 請寫一段 Python連接 Mongo 數據庫，然后的查詢代碼。

62. 說一說 Redis 的基本類型。

63. 請寫一段 Python連接 Redis 數據庫的代碼。

64. 請寫一段 Python 連接 MySQL 數據庫的代碼。

65. 了解 Redis 的事務么？

66. 了解數據庫的三范式么？

67. 了解分布式鎖么？

68. 用 Python 實現一個 Reids 的分布式鎖的功能。

69. 寫一段 Python 使用 Mongo 數據庫創建索引的代碼。

高級特性

70. 函數裝飾器有什么作用？請列舉說明？

71. Python 垃圾回收機制？

72. 魔法函數 __call__怎么使用?

73. 如何判斷一個對象是函數還是方法？

74. @classmethod 和@staticmethod 用法和區別

75. Python 中的接口如何實現？

76. Python 中的反射了解么?

77. metaclass 作用？以及應用場景？

78. hasattr() getattr() setattr()的用法

79. 請列舉你知道的 Python 的魔法方法及用途。

80. 如何知道一個 Python 對象的類型？

81. Python 的傳參是傳值還是傳址？

82. Python 中的元類(metaclass)使用舉例

83. 簡述 any()和 all()方法

84. filter 方法求出列表所有奇數并構造新列表，a = [1, 2, 3, 4, 5, 6, 7, 8, 9, 10]

85. 什么是猴子補丁？

86. 在 Python 中是如何管理內存的？

87. 當退出 Python 時是否釋放所有內存分配？

正則表達式

88. 使用正則表達式匹配出www.baidu.com中的地址

a=“張明 98 分”，用 re.sub，將 98 替換為 100

89. 正則表達式匹配中(. )和(. ?)匹配區別？

90. 寫一段匹配郵箱的正則表達式

其他內容

91. 解釋一下 python 中 pass 語句的作用？

92. 簡述你對 input()函數的理解

93. python 中的 is 和==

94. Python 中的作用域

95. 三元運算寫法和應用場景？

96. 了解 enumerate 么？

97. 列舉 5 個 Python 中的標準模塊

98. 如何在函數中設置一個全局變量

99. pathlib 的用法舉例

100. Python 中的異常處理，寫一個簡單的應用場景

101. Python 中遞歸的最大次數，那如何突破呢？

102. 什么是面向對象的 mro

103. isinstance 作用以及應用場景？

104. 什么是斷言？應用場景？

105. lambda 表達式格式以及應用場景？

106. 新式類和舊式類的區別

107. dir()是干什么用的？

108. 一個包里有三個模塊，demo1.py, demo2.py, demo3.py，但使用 from tools import *導入模塊時，如何保證只有 demo1、demo3 被導入了。

109. 列舉 5 個 Python 中的異常類型以及其含義

110. copy 和 deepcopy 的區別是什么？

111. 代碼中經常遇到的*args, **kwargs 含義及用法。

112. Python 中會有函數或成員變量包含單下劃線前綴和結尾，和雙下劃線前綴結尾，區別是什么?

113. w、a+、wb 文件寫入模式的區別

114. 舉例 sort 和 sorted 的區別

115. 什么是負索引？

116. pprint 模塊是干什么的？

117. 解釋一下 Python 中的賦值運算符

118. 解釋一下 Python 中的邏輯運算符

119. 講講 Python 中的位運算符

120. 在 Python 中如何使用多進制數字？

121. 怎樣聲明多個變量并賦值？

04

算法和數據結構

122. 已知：

(1) 從 AList 和 BSet 中 查找 4，最壞時間復雜度那個大？

(2) 從 AList 和 BSet 中 插入 4，最壞時間復雜度那個大？

123. 用 Python 實現一個二分查找的函數

124. python 單例模式的實現方法

125. 使用 Python 實現一個斐波那契數列

126. 找出列表中的重復數字

127. 找出列表中的單個數字

128. 寫一個冒泡排序

129. 寫一個快速排序

130. 寫一個拓撲排序

131. python 實現一個二進制計算

132. 有一組“+”和“-”符號，要求將“+”排到左邊，“-”排到右邊，寫出具體的實現方法。

133. 單鏈表反轉

134. 交叉鏈表求交點

135. 用隊列實現棧

136. 找出數據流的中位數

137. 二叉搜索樹中第 K 小的元素

爬蟲相關

138. 在 requests 模塊中，requests.content 和 requests.text 什么區別

139. 簡要寫一下 lxml 模塊的使用方法框架

140. 說一說 scrapy 的工作流程

141. scrapy 的去重原理

142. scrapy 中間件有幾種類，你用過哪些中間件

143. 你寫爬蟲的時候都遇到過什么？反爬蟲措施，你是怎么解決的？

144. 為什么會用到代理？

145. 代理失效了怎么處理？

146. 列出你知道 header 的內容以及信息

147. 說一說打開瀏覽器訪問 www.baidu.com 獲取到結果，整個流程。

148. 爬取速度過快出現了驗證碼怎么處理

149. scrapy 和 scrapy-redis 有什么區別？為什么選擇 redis 數據庫？

150. 分布式爬蟲主要解決什么問題

151. 寫爬蟲是用多進程好？還是多線程好？為什么？

152. 解析網頁的解析器使用最多的是哪幾個

153. 需要登錄的網頁，如何解決同時限制 ip，cookie,session（其中有一些是動態生成的）在不使用動態爬取的情況下？

154. 驗證碼的解決（簡單的：對圖像做處理后可以得到的，困難的：驗證碼是點擊，拖動等動態進行的？）

155. 使用最多的數據庫（mysql，mongodb，redis 等），對他的理解？

網絡編程

156. TCP 和 UDP 的區別？

157. 簡要介紹三次握手和四次揮手

158. 什么是粘包？socket 中造成粘包的原因是什么？哪些情況會發生粘包現象？

并發

159. 舉例說明 conccurent.future 的中線程池的用法

160. 說一說多線程，多進程和協程的區別。

161. 簡述 GIL

162. 進程之間如何通信

163. IO 多路復用的作用？

164. select、poll、epoll 模型的區別？

165. 什么是并發和并行？

166. 一個線程 1 讓線程 2 去調用一個函數怎么實現？

167. 解釋什么是異步非阻塞？

168. threading.local 的作用？

Git 面試題

169. 說說你知道的 git 命令

170. git 如何查看某次提交修改的內容