css选择器基本语法如下 * 选择所有节点 #container 选择id为container的节点 .container 选取所有class包含container节点 li a 选取所有li下的所有a节点 ul+p 选取ul后面的第一个p元素 div#container>ul 选取id为container的div的第一个ul子元素 ul~p 选取与ul相邻的所有p元素 a[title] 选取所有有title属性的a元素 a[href="http://www.imooc.com"] 选取所有href属性为www.imooc.com值的a元素 a[href*=&quot...

xpath简介1.xpath使用路径表达式在xml和html中进行导航，即可以通过路径表达式确定在html中所需元素的位置2.xpath包含标准函数库3.xpath是一个w3c的标准xpath节点关系1.父节点2.子节点3.同胞节点4.先辈节点5.后代节点xpath语法 article 选取所有article元素的所有子节点 /aticle 选取根元素article article/a 选取所有属于article的子元素的a元素 //div 选取所有div子元素 article//div 选取所有属于article元素后代的div元素 //@class 选取所有名为class的属性 /arti...

基本语法：提取字符串：1999年8月1日 str.split("年")[0]或者用正则表达式 . 匹配任意字符 ^ 匹配开头字符 $ 匹配结尾字符 * 匹配前一个字符出现0-任意多次 + 匹配前一个字符出现1-任意多次 ? 匹配前一个字符出现0-1次 {m,n} 匹配前一个字符出现m-n次 \\ 转义字符。其后字符失去特殊字符的含义：\\.只能匹配. [] 一个字符的集合，可匹配其中任意一个字符 | 或，a|b表示可匹配a或b \b 匹配位于单词开始或结束位置的空字符串 \B 匹配不位于单词开始或结束位置的空字符串 \d 匹配一个数字，相当于[0-9] \D 匹配非数字 \...

request是python中的HTTP库 import requests res=requests.get("http://www.baidu.com") print(res.encoding) print(res.status_code) print(res.headers)结果如下： ISO-8859-1 200 {'Cache-Control': 'private, no-cache, no-store, proxy-revalidate, no-transform', 'Connection': 'keep-alive', 'Content-Encoding': ...

按对象分：1.全网采集2.全站采集3.具体网站的指定数据采集按方案分：1.http协议采集（web页面采集）2.api接口采集（app数据采集）3.api采集（web上，例如：github,twitter,主要是做相关拓展应用）

读取网页的第一种方法： #encoding: utf-8 import urllib2 def download1(url): return urllib2.urlopen(url).read() #读取全部网页，由于是read url="https://www.baidu.com" print download1(url) url="http://www.baidu.com" #urlopen只能处理http,不能处理https print download1(url)读取网页的第二种方法： def download2(url): return url...

本文使用mysql+jupyter 基础python操作在这里跳过json格式是javascript对象表示法，json格式是一种轻量级的文本数据交换格式，拥有储存空间小，处理速度快的优势json本质上是一种嵌套字典格式，但键所对应的值，往往更加复杂，不仅是数字，还可以是字符串，数组，列表等

题目：两个字符串长度相同，都是由26 个小写字母组成。需要编写一个判断两个字符串是否是一对变位词的布尔函数，返回真假。1.基本的解法：一个个单词进行匹配，不对就移动到下一个。 def solution(s1,s2): a_list=list(s2) pos1=0 still_ok=True while pos1<len(s1) and still_ok: pos2=0 found=False while pos2<len(a_list) and not found: if s1[pos1] == a_list[pos2]: found=True else: pos2 += 1 if...

Python是一种解释型语言定义“类”去描述数据的外观（状态）和功能（行为）数据项在面向对象的范式里被称为对象对象是类的一个实例 capitals={'key1':'value1','key2':'value2'} capitals['key']='value' for k in capitalsinput 函数在接收到用户的输入后，它的返回值是一个字符串。 >>> print("Hello","World", sep="***") Hello***World >>> print("Hel...

多表查询 1.基本查询语法： select 列名列表 from 表名列表 where.....2.多表查询的分类(1)内连接查询：隐式内连接：使用where条件 select * from emp,dept where emp.'dept_id'=dept.'id'; select emp.name,emp.gender,dept.name from emp,dept where emp.'dept_id'=dept.'id'; select t1.name, t1.gender, t2.name from emp t1, dept.t2 where t1.'dept_id'=t2.'id';...

DQL：查询语句 1.排序函数order by 排序字段 排序方式 select *from student order by math asc;排序方式asc:升序，默认desc:降序 select *from student order by math asc,english asc;用多个排序条件，当第一个条件一致时，才会用第二个条件排序2.聚合函数将一列数据给一个整体，进行纵向（列）的计算count:计算个数max：最大min：最小sum：求和avg：求平均值聚合函数的计算忽视nul select count(name) from student; select count(ifnul...

SQL语句有以下几点需要注意的： 1.SQL语句可以单行，或者多行书写，重要的是以分号；结尾2.MySQL是不区分大小写的，一般关键字大写，自己定义的一些表名之类的用小写3.注释方法有三种：（1）单行注释：-- 特别注意：在--后面要先加上一个空格，再输入注释的语句（2）单行注释：#这种注释方法在#的后面就不用加空格，直接输入注释的语句（3）多行注释：/* 注释 */ 对于SQL的语句主要有四种分类： 1.DDL：数据定义语言 用来定义数据库对象：数据库，表，列等关键字： create,drop,alter2.DML：数据操作语言 对数据库中的表进行 增删改关键字： insert,delete...

首先我从OpenStreetMap上面下载了相关城市的路网数据 主要参考博客是https://liujiao111.github.io/2019/06/14/osm-way/其实从OpenStreetMap弄下来的数据一般都是 .osm格式的，需要把它转化为 .csv格式 然后通过高德地图拿到相关城市的POI数据 主要参考博客是https://blog.csdn.net/qq_34464926/article/details/79128211 JUST数据导入 首先看看JUST给出的开发手册： 第一步是导入路网数据： 1.点击上传按钮，弹出数据上传窗口。在上传窗口内选中示例路网文件，表类型选择...