-
Notifications
You must be signed in to change notification settings - Fork 0
/
Copy pathhi.py
160 lines (136 loc) · 9.44 KB
/
hi.py
1
2
3
4
5
6
7
8
9
10
11
12
13
14
15
16
17
18
19
20
21
22
23
24
25
26
27
28
29
30
31
32
33
34
35
36
37
38
39
40
41
42
43
44
45
46
47
48
49
50
51
52
53
54
55
56
57
58
59
60
61
62
63
64
65
66
67
68
69
70
71
72
73
74
75
76
77
78
79
80
81
82
83
84
85
86
87
88
89
90
91
92
93
94
95
96
97
98
99
100
101
102
103
104
105
106
107
108
109
110
111
112
113
114
115
116
117
118
119
120
121
122
123
124
125
126
127
128
129
130
131
132
133
134
135
136
137
138
139
140
141
142
143
144
145
146
147
148
149
150
151
152
153
154
155
156
157
158
159
160
import urllib.request
import re
import bs4
import time
import csv
from bs4 import BeautifulSoup
#lis = ('玛修・基列莱特', '阿尔托莉雅・潘德拉贡', '阿尔托莉雅・潘德拉贡(Alter)', '阿尔托莉雅・潘德拉贡(Lily)', '尼禄・克劳狄乌斯', '齐格飞', '盖乌斯・尤利乌斯・恺撒', '阿蒂拉', '吉尔・德・雷', '骑士迪昂', '卫宫', '吉尔伽美什', '罗宾汉', '阿塔兰忒', '尤瑞艾莉', '阿拉什', '库・丘林', '伊丽莎白・巴托里', '武藏坊弁庆', '库・丘林(Prototype)', '列奥尼达一世', '罗穆路斯', '美杜莎', '乔尔乔斯', '爱德华・蒂奇', '布狄卡', '牛若丸', '亚历山大', '玛丽・安托瓦内特', '玛尔达', '美狄亚', '吉尔・德・雷', '汉斯・克里斯蒂安・安徒生', '威廉・莎士比亚', '梅菲斯托费勒斯', '沃尔夫冈・阿马德乌斯・莫扎特', '诸葛孔明(埃尔梅罗Ⅱ世)', '库・丘林', '佐佐木小次郎', '咒腕哈桑', '斯忒诺', '荆轲', '夏尔・亨利・桑松', '剧院魅影', '玛塔・哈丽', '卡米拉', '赫拉克勒斯', '兰斯洛特', '吕布奉先', '斯巴达克斯', '坂田金时', '弗拉德三世', '阿斯忒里俄斯', '卡利古拉', '大流士三世', '清姬', '血斧埃里克', '玉藻猫', '贞德', '俄里翁', '伊丽莎白・巴托里(万圣节)', '玉藻前', '大卫', '赫克托耳', '弗朗西斯・德雷克', '安妮・伯妮＆玛莉・瑞德', '美狄亚(Lily)', '冲田总司', '织田信长', '斯卡哈', '迪尔姆德・奥迪那', '弗格斯・马克・罗伊', '阿尔托莉雅・潘德拉贡(圣诞Alter)', '童谣', '开膛手杰克', '莫德雷德', '尼古拉・特斯拉', '阿尔托莉雅·潘德拉贡(Alter)(Lancer)', '冯・霍恩海姆・帕拉塞尔苏斯', '查尔斯・巴贝奇', '亨利・杰基尔＆海德', '弗兰肯斯坦', '所罗门', '阿周那', '迦尔纳', '谜之女主角X', '芬恩・麦克库尔', '布伦希尔德', '贝奥武夫', '尼禄・克劳狄乌斯(新娘)', '两仪式', '两仪式(Assassin)', '天草四郎', '阿斯托尔福', '幼吉尔', '岩窟王', '南丁格尔', '库・丘林(Alter)', '女王梅芙', '海伦娜・布拉瓦茨基', '罗摩', '李书文', '托马斯・爱迪生', '杰罗尼莫', '比利小子', '贞德(Alter)', '安哥拉曼纽', '伊斯坎达尔', '卫宫(Assassin)', '百貌哈桑', '爱丽丝菲尔(天之衣)', '酒吞童子', '玄奘三藏', '源赖光', '坂田金时(Rider)', '茨木童子', '风魔小太郎', '奥斯曼狄斯', '阿尔托莉雅·潘德拉贡(Lancer)', '尼托克丽丝', '兰斯洛特(Saber)', '崔斯坦', '高文', '静谧哈桑', '俵藤太', '贝德维尔', '莱昂纳多・达・芬奇', '玉藻前(Lancer)', '阿尔托莉雅·潘德拉贡(Archer)', '玛丽·安托瓦内特(Caster)', '安妮·伯妮＆玛莉·瑞德(Archer)', '莫德雷德(Rider)', '斯卡哈(Assassin)', '清姬(Lancer)', '玛尔达(Ruler)', '伊莉雅丝菲尔・冯・爱因兹贝伦', '克洛伊・冯・爱因兹贝伦', '伊丽莎白・巴托里(勇者)', '克娄巴特拉', '弗拉德三世(EXTRA)', '贞德・Alter・Santa・Lily', '伊什塔尔', '恩奇都', '魁札尔・科亚特尔', '吉尔伽美什(Caster)', '美杜莎(Lancer)', '戈耳工', '豹人', '提亚马特', '梅林', '盖提亚', '所罗门', '宫本武藏', '“山中老人”', '谜之女主角X(Alter)', '新宿的Archer', '卫宫(Alter)', '新宿的Avenger', '新宿的Assassin', '亚瑟・潘德拉贡(Prototype)', '土方岁三', '茶茶', 'Meltryllis', 'Passionlip', '铃鹿御前', 'BB', '杀生院祈荒', 'BeastⅢ', '不夜城的Caster', '不夜城的Assassin', '黄金国的Berserker', '反抗军的Rider', '夏洛克・福尔摩斯', '保罗・班扬', '尼禄·克劳狄乌斯(Caster)', '弗兰肯斯坦(Saber)', '尼托克丽丝(Assassin)', '织田信长(Berserker)', '阿尔托莉雅·潘德拉贡(Alter)(Rider)', '海伦娜·布拉瓦茨基(Archer)', '源赖光(Lancer)', '伊什塔尔(Rider)', '帕尔瓦蒂', 'Archer Inferno', 'Assassin Paraiso', '宝藏院胤舜', '柳生但马守宗矩', '加藤段藏', '刑部姬', '机械伊丽亲', '机械伊丽亲Ⅱ号机', '俄刻阿诺斯的Caster', '哪吒', '米德拉什的Caster', '阿比盖尔・威廉姆斯', '埃列什基伽勒', '阿蒂拉·the·San(ta)', '葛饰北斋', '塞弥拉弥斯', '浅上藤乃', '阿纳斯塔西娅', '阿塔兰忒(Alter)', '阿维斯布隆', '安东尼奥・萨列里', '伊凡雷帝', '阿喀琉斯', '喀戎', '齐格', '冲田总司(Alter)', '冈田以藏', '坂本龙马', '拿破仑', '齐格鲁德', '瓦尔基里', '斯卡哈・丝卡蒂', '贞德(Archer)', '茨木童子(Lancer)', '牛若丸(Assassin)', '贞德(Alter)(Berserker)', 'BB(SSR)', '女王梅芙(Saber)', '谜之女主角XX', '迪尔姆德・奥迪那(Saber)', '西托奈', '酒吞童子(Caster)', '项羽', '兰陵王', '秦良玉', '始皇帝', '虞美人', '赤兔马', '布拉达曼特', '魁札尔·科亚特尔(桑巴/圣诞)', '红阎魔', '李书文(Assassin)', '美游・艾德费尔特', '紫式部', 'Kingprotea')
a = 0
#print('hello world')
"""
for name in lis:
a -= 1
if(a<0):
break
print(name)
url = "https://fgo.wiki/w/" + urllib.parse.quote(name)
page = urllib.request.urlopen(url)
data = page.read()
udata = data.decode('utf-8')
soup = BeautifulSoup(udata, 'html.parser')
temp = (soup.find(property="og:title").attrs)
#print(temp)
print(temp.get('content'))
temp = (soup.find(property="og:description").attrs)
#print(temp)
print(temp.get('content'))
"""
for i in range(1):
row = []
#176 214 222 235炸了
#row.append(lis[i])
row.append(str(i+1))
url = 'https://fgo.wiki/w/%E8%BF%A6%E6%91%A9'
page = urllib.request.urlopen(url)
data = page.read()
udata = data.decode('utf-8')
soup = BeautifulSoup(udata, 'html.parser')
x = soup.find_all('p')
temp = 29
for l in x:
temp -= 1
for d in l:
if(type(d) == bs4.element.NavigableString):
d = str(d)
matchObj = re.match('\w*\W体重\W(\d*\w*)\W(\d*\w*)', d, re.M|re.I)
if(matchObj):
#"身高:" +
#print(matchObj.group(1))
row.append(matchObj.group(1))
#"体重:" +
row.append(matchObj.group(2))
matchObj = re.match('\W*出处\W*(\w*)', d, re.M|re.I)
if(matchObj):
#"出处：" +
row.append(matchObj.group(1))
matchObj = re.match('\W*地域\W*(\w*)', d, re.M|re.I)
if(matchObj):
#"地域：" +
row.append(matchObj.group(1))
matchObj = re.match('\W*属性\W*(\w*)\W(\w*)\s*性别\W*(\w*)', d, re.M|re.I)
if(matchObj):
pass
#"属性：" +"性别：" +
#row.append( matchObj.group(1) + "·" + matchObj.group(2))
#row.append( matchObj.group(3))
x = soup.find_all('td')
i = 1
for l in x:
#1-16
#日文名，英文名，画师，声优，
#职阶 性别 身高 体重 属性 阵营
#筋力 耐久 敏捷 魔力 幸运 宝具
#18-22
#HP：基础 满级 90级 100级 MAX
#28-32
#HP：基础 满级 90级 100级 MAX
#45-47 被即死率 暴击星分配权重 特性
#53 编号
#150-151 宝具
#print(str(l.get_text()))
match = re.match('\A\d', str(l.get_text()), re.M|re.I)
if(not match):
match = re.match('\W*请升级浏览器', str(l.get_text()), re.M|re.I)
if(not match and i < 48 and i != 17):
row.append(str.rstrip(l.get_text()))
i += 1
temp = soup.find_all({"th",'p','td' 'img','a'})
k = 0
record = 0
pic = 0
jrecord=0
for i in temp:
if(i.text == "角色详情\n"
or i.text == "解锁条件：羁绊达到Lv.1后开放\n"
or i.text == "解锁条件：羁绊达到Lv.2后开放\n"
or i.text == "解锁条件：羁绊达到Lv.3后开放\n"
or i.text == "解锁条件：羁绊达到Lv.4后开放\n"
or i.text == "解锁条件：羁绊达到Lv.5后开放\n"
):
k = 2
#row.append(str.strip(i.text))
elif(k ==2):
row.append(str.strip(i.text))
#print("\n\n")
k -= 1
if(i.text == "解说\n"):
if(record == 0):
k = 2
record = 1
if(i.text == "羁绊礼装\n"):
pic = 7
if(pic == 4):
try:
if(jrecord == 0):
row.append(str.strip(i.attrs['title']))
#print(str.strip(i.attrs['title']))
jrecord = 1
pass
except:
pass
if(pic > 2):
shit = i.find('img')
#print(i)
try:
##print("\n\n")
row.append("https://fgo.wiki" + shit.attrs['src'])
except:
pass
#print(t.src)
#print(t.width)
#print(t.height)
pic -= 1
with open('insert.csv', 'a') as csvFile:
writer = csv.writer(csvFile)
writer.writerow(row)
csvFile.close()