下缸体加工线刀具配置

在表格内插入图片。列宽指定，图片宽度指定为接近100%

两张图片的长宽比例不一样
设置两列的宽度各为50%
图片的宽度都为99%，不设置会溢出。

这里是表格的标题

图片1	图片2

用div标签加float属性和overflow:hidden属性（即溢出的隐藏掉）

两张图片的长宽比例相同
两个DIV设置的宽度各50%

111

222

图1

图2

图3

图4

对于长宽比相同的照片这样效果还是很漂亮的。

图1

图2

图1

图2

概括

概括：

合作意向书

CVD系列：

PVD系列：

金属陶瓷：

CBN:

PCD:

硬质合金：

所需要的模块：

1
2
3
4
5

1. requests          2.23.0 
2. urllib3           1.25.8 
3. urlopen           1.0.0
4. beautifulsoup4    4.8.2
5. lxml              4.5.0

举例讲解

用正则表达式：

解析网页的步骤：

1. 指定要爬的网址 (url)
2. 使用 python 登录上这个网址 (urlopen等)
3. 读取网页信息 (read() 出来)

获取网页的Html代码：

1

html = urlopen(‘url’).read().decoad(‘utf-8’)    

exp:

1
2
3
4
5
6

#读取网站的HTML代码。导入模块后用urlopen即可以读取指定网页的html代码
from urllib.request import urlopen
html = urlopen(
    "https://morvanzhou.github.io/static/scraping/basic-structure.html"
).read().decode('utf-8')
print(html)

从已经提取的网页信息中匹配网页的title:

1

res = re.findall(r"<title>(.+?)</title>", html)

exp:

1
2
3
4
5
6
7
8
9

from urllib.request import urlopen
html = urlopen(
    "https://morvanzhou.github.io/static/scraping/basic-structure.html"
).read().decode('utf-8')

import re
res = re.findall(r"<title>(.+?)</title>", html)
print("\nPage title is: ", res[0])

从已经提取的网页信息中匹配网页的href

1

res = re.findall(r'href="(.*?)"', html)

exp:

1
2

res = re.findall(r'href="(.*?)"', html)
print("\nAll links: ", res)

用BeautifulSoup 解析网页：

1. 导入模块:

   1 2 3

   1. import requests 2. from urllib.request import urlopen 3. from bs4 import BeautifulSoup

解析网页的步骤：

1. 指定要爬的网址 (url)
2. 使用 python 登录上这个网址 (urlopen等)
3. 读取网页信息 (read() 出来)
4. 将读取的信息放入 BeautifulSoup
5. 使用 BeautifulSoup 选取 tag 信息等 (代替正则表达式)

exp:

1
2
3
4
5
6
7

html = urlopen(
    "https://morvanzhou.github.io/static/scraping/basic-structure.html"
).read().decode('utf-8')
soup = BeautifulSoup(html,features='lxml')
print('打印网页的一级标题',soup.h1)
print('打印网页段落内容',soup.p.contents)
print('打印网页链接',soup.a)

BeautifulSoup的工作原理：

1. 读取这个网页信息, 我们将要加载进 BeautifulSoup, 以 lxml 的这种形式加载. 除了 lxml, 其实还有很多形式的解析器, 不过大家都推荐使用 lxml 的形式. 然后 soup 里面就有着这个 HTML 的所有信息. 如果你要输出

   标题, 可以就直接 soup.h1.

2. 如果网页中有多个同样的 tag, 比如链接 , 我们可以使用 find_all() 来找到所有的选项. 因为我们真正的 link 不是在 中间 , 而是在 里面, 也可以看做是 的一个属性. 我们能用像 Python 字典的形式, 用 key 来读取 l[“href”].

上面是用html的标签进行解析，也可以通过网页的css解析

按 Class 匹配

按 Class 匹配很简单. 比如我要找所有 class=month 的信息. 并打印出它们的 tag 内文字.

或者找到 class=jan 的信息. 然后在

下面继续找
内部的
• 信息. 这样一层层嵌套的信息, 非常容易找到.

exp:

1
2
3
4
5
6
7
8
9

soup = BeautifulSoup(html, features='lxml')
month = soup.find_all('li', {"class": "month"})
for m in month:
    print(m.get_text())

jan = soup.find('ul', {"class": 'jan'})
d_jan = jan.find_all('li')            
for d in d_jan:
    print(d.get_text())

正则匹配：

我们先读取这个网页. 导入正则模块 re.

exp:

1
2
3
4
5

from bs4 import BeautifulSoup
from urllib.request import urlopen
import re

html = urlopen("https://morvanzhou.github.io/static/scraping/table.html").read().decode('utf-8')

比如图片, 它们都藏在这样一个 标签中，但是每个标签的src（图片地址）可能不同。或者图片的格式也不同，有JPG,PNG,WEBP等等。如果只需要某一类的图片呢？可以用正则表达式。r’.*?\.webp找出所有webp格式的图片链接。把正则的 compile 形式放到 BeautifulSoup 的功能中, 就能选到符合要求的图片链接了.

exp:

1
2
3
4

soup = BeautifulSoup(html, features='lxml')
img_links = soup.find_all("img", {"src": re.compile('.*?\.webp')})
for link in img_links:
    print(link['src'])

又或者我们发现, 我想选一些课程的链接, 而这些链接都有统一的形式, 就是开头都会有 https://morvan., 那我就将这个定为一个正则的规则, 让 BeautifulSoup 帮我找到符合这个规则的链接.

exp:

1
2
3

course_links = soup.find_all('a', {'href': re.compile('https://morvan.*')})
for link in course_links:
    print(link['href'])

Requests

获取网页的方式 :其实在加载网页的时候, 有几种类型, 而这几种类型就是你打开网页的关键. 最重要的类型 (method) 就是 get 和 post (当然还有其他的, 比如 head, delete). 刚接触网页构架的朋友可能又会觉得有点懵逼了. 这些请求的方式到底有什么不同? 他们又有什么作用?

我们就来说两个重要的, get, post, 95% 的时间, 你都是在使用这两个来请求一个网页.

1
2
3
4
5
6
7
8
9

1. post
   1. 账号登录
   2. 搜索内容
   3. 上传图片
   4. 上传文件
   5. 往服务器传数据 等
2. get
   1. 正常打开网页
   2. 不往服务器传数据

这样看来, 很多网页使用 get 就可以了, 比如 莫烦Python 里的所有页面, 都是只是 get 发送请求. 而 post, 我们则是给服务器发送个性化请求, 比如将你的账号密码传给服务器, 让它给你返回一个含有你个人信息的 HTML.

从主动和被动的角度来说, post 中文是发送, 比较主动, 你控制了服务器返回的内容. 而 get 中文是取得, 是被动的, 你没有发送给服务器个性化的信息, 它不会根据你个性化的信息返回不一样的 HTML.

requests get 请求

有了 requests, 我们可以发送个中 method 的请求. 比如 get. 我们想模拟一下百度的搜索. 首先我们需要观看一下百度搜索的规律. 在百度搜索框中写上 “莫烦python” 我们发现它弹出了一串这么长的网址.

但是仔细一看, 和 “莫烦Python” 有关的信息, 只有前面一小段 (“s?wd=莫烦python”), 其他的对我们来说都是无用的信息. 所以我们现在来尝试一下如果把后面的”无用” url 都去掉会怎样? Duang! 我们还是能搜到 “莫烦python”.

所以 “s?wd=莫烦python” 这就是我们搜索需要的关键信息. 我们就能用 get 来搭配一些自定义的搜索关键词来用 python 个性化搜索. 首先, 我们固定不动的网址部分是 “http://www.baidu.com/s”, ? 后面的东西都是一些参数 (parameters), 所以我们将这些 parameters 用 python 的字典代替, 然后传入 requests.get() 功能. 然后我们还能用 python (webbrowser模块) 打开一个你的默认浏览器, 观看你是否在百度的搜索页面.

exp:

1
2
3
4
5
6

import requests
import webbrowser
param = {"wd": "莫烦Python"}  # 搜索的信息
r = requests.get('http://www.baidu.com/s', params=param)
print(r.url)
webbrowser.open(r.url)

python创建文件夹。下面的代码是运行结果在d盘下创建了一个名为dr_name的文件夹。 d:\dr_name

1
2
3
4
5
6
7
8
9
10
11

import os
def mkdir(path):
    folder = os.path.exists(path)
    if not folder:  # 判断是否存在文件夹如果不存在则创建为文件夹
        os.makedirs(path)  # makedirs 创建文件时如果路径不存在会创建这个路径
        print("---new folder...  ---")
        print("---  OK  ---")
    else:
        print("---  There is this folder!  ---")
file = 'd:\\dr_name'# 指定位置及目录名
mkdir(file)  # 调用函数

谷歌浏览器是非常优秀的，这是众所周知的。我用的就是谷歌GOOGLE浏览器，但是默认的googl搜索引擎，在不爬墙的前提下是用不了的。那怎么办？再比如有时你需要在知乎或者淘宝等网站搜索内容，需要先进到他们的网站再搜索，这里有更快捷的办法了。

本文介绍自己定制多个搜索引擎，并且在地址栏中快速切换。比如我想在知乎搜索，那么就在地址栏先输入“zh”然后空格 就直接引入到知乎搜索了，就是这么简单，下面具体介绍：以chrome设置为例：

1. 进入设置–>搜索引擎–>管理搜索引擎。这里可以设置默认的搜索引擎，也可以添加和修改搜索引擎
2. 添加搜索引擎：三个内容需要填写
   1. 搜索引擎：就是名称，可以自己设置
   2. 关键字：这个就是你在地址栏内键入的字来切换搜索引擎，尽量短，易辨。比如百度：bd ,百度百科：bk，知乎：zh，淘宝：tb
   3. 网址格式：这里是关键了。因为每个网站的搜索格式可能有区别，那么需要先到这个网站的搜索栏输入搜索测试，找到其格式，用%s代替搜索的关键字即可。
      1. 先测试网站的搜索，查到网站搜索格式
      2. 复制地址栏内的内容：如：我搜索“python”在不同的搜索引擎下

         1 2 3 4 5

         https://cn.bing.com/search?q=python&PC=U316&FORM=CHROMN https://www.baidu.com/s?ie=UTF-8&wd=python https://baike.baidu.com/item/python/407313 https://www.zhihu.com/search?q=python&type=content https://s.taobao.com/search?q=python&imgfile=&commend=all&ssid=s5-e&search_type=item&sourceId=tb.index&spm=a21bo.2017.201856-taobao-item.1&ie=utf8&initiative_id=tbindexz_20170306

      3. 将你刚才输入的搜索内容替换成%s。
3. 已经搞定了。这个时候你只需要在地址栏输入你设置的关键字就可以跳转到指定的搜索了。

以下列举我自己常用的几个网站的搜索设置：

获取桌面路径。实际是通过读取注册表查看

1
2
3
4
5
6
7
8
9

import winreg
def get_desktop():
    key = winreg.OpenKey(winreg.HKEY_CURRENT_USER,
                         r'Software\Microsoft\Windows\CurrentVersion\Explorer\Shell Folders')  # 利用系统的注册表
    return winreg.QueryValueEx(key, "Desktop")[0]  # 返回的是Unicode类型数据
if __name__ == '__main__':
    Desktop_path = str(get_desktop())  # Unicode转化为str
    pos = Desktop_path
print(pos)