Skip to content
体验新版
项目
组织
正在加载...
登录
切换导航
打开侧边栏
sxaah
dr_py
提交
68f8ca07
dr_py
项目概览
sxaah
/
dr_py
与 Fork 源项目一致
Fork自
晚风拂柳颜 / dr_py
通知
1
Star
1
Fork
0
代码
文件
提交
分支
Tags
贡献者
分支图
Diff
Issue
0
列表
看板
标记
里程碑
合并请求
0
DevOps
流水线
流水线任务
计划
Wiki
0
Wiki
分析
仓库
DevOps
项目成员
Pages
dr_py
项目概览
项目概览
详情
发布
仓库
仓库
文件
提交
分支
标签
贡献者
分支图
比较
Issue
0
Issue
0
列表
看板
标记
里程碑
合并请求
0
合并请求
0
Pages
DevOps
DevOps
流水线
流水线任务
计划
分析
分析
仓库分析
DevOps
Wiki
0
Wiki
成员
成员
收起侧边栏
关闭侧边栏
动态
分支图
创建新Issue
流水线任务
提交
Issue看板
体验新版 GitCode,发现更多精彩内容 >>
提交
68f8ca07
编写于
11月 08, 2022
作者:
H
hjdhnx
浏览文件
操作
浏览文件
下载
电子邮件补丁
差异文件
更新jar,优化js0解析性能,修复江湖解析
上级
7dac66f9
变更
9
隐藏空白更改
内联
并排
Showing
9 changed file
with
51 addition
and
8 deletion
+51
-8
base/files/custom_spider_xyq.jar
base/files/custom_spider_xyq.jar
+0
-0
base/rules.db
base/rules.db
+0
-0
controllers/cms.py
controllers/cms.py
+10
-3
jiexi/插萝莉慢.js
jiexi/插萝莉慢.js
+13
-0
jiexi/江湖.js
jiexi/江湖.js
+2
-1
js/custom_spider.jar
js/custom_spider.jar
+0
-0
js/version.txt
js/version.txt
+1
-1
readme.md
readme.md
+2
-0
utils/htmlParser.py
utils/htmlParser.py
+23
-3
未找到文件。
base/files/custom_spider_xyq.jar
浏览文件 @
68f8ca07
无法预览此类型文件
base/rules.db
浏览文件 @
68f8ca07
无法预览此类型文件
controllers/cms.py
浏览文件 @
68f8ca07
...
...
@@ -8,7 +8,6 @@ import json
import
requests
import
re
import
math
import
ujson
from
utils.web
import
*
...
...
@@ -803,6 +802,7 @@ class CMS:
else
:
p
=
p
.
split
(
';'
)
# 解析
# print(len(p))
# print(p)
if
len
(
p
)
<
5
:
return
self
.
blank
()
...
...
@@ -862,7 +862,7 @@ class CMS:
for
video
in
videos
:
if
video
.
get
(
'vod_pic'
,
''
)
and
str
(
video
[
'vod_pic'
]).
startswith
(
'http'
):
video
[
'vod_pic'
]
=
f
"
{
video
[
'vod_pic'
]
}{
self
.
图片来源
}
"
print
(
videos
)
print
(
'videos:'
,
videos
)
limit
=
40
cnt
=
9999
if
len
(
videos
)
>
0
else
0
result
[
'list'
]
=
videos
...
...
@@ -923,6 +923,8 @@ class CMS:
if
is_json
:
html
=
self
.
dealJson
(
html
)
html
=
json
.
loads
(
html
)
tt1
=
time
()
if
p
.
get
(
'title'
):
p1
=
p
[
'title'
].
split
(
';'
)
vod
[
'vod_name'
]
=
pdfh
(
html
,
p1
[
0
]).
replace
(
'
\n
'
,
' '
).
strip
()
...
...
@@ -1090,12 +1092,14 @@ class CMS:
vod_tab_list
.
append
(
vlist
)
vod_play_url
=
vod_play_url
.
join
(
vod_tab_list
)
vod_play_url_str
=
vod_play_url
[:
min
(
len
(
vod_play_url
),
2
00
)]
vod_play_url_str
=
vod_play_url
[:
min
(
len
(
vod_play_url
),
5
00
)]
print
(
vod_play_url_str
)
vod
[
'vod_play_from'
]
=
vod_play_from
# print(vod_play_from)
vod
[
'vod_play_url'
]
=
vod_play_url
logger
.
info
(
f
'
{
self
.
getName
()
}
仅二级渲染
{
len
(
vod_play_url
.
split
(
"$$$"
)[
0
].
split
(
"$"
))
}
集耗时:
{
get_interval
(
tt1
)
}
毫秒,共计
{
round
(
len
(
str
(
vod
))
/
1000
,
2
)
}
kb'
)
if
show_name
:
vod
[
'vod_content'
]
=
f
'(
{
self
.
id
}
)
{
vod
.
get
(
"vod_content"
,
""
)
}
'
return
vod
...
...
@@ -1196,6 +1200,9 @@ class CMS:
return
result
def
searchContent
(
self
,
key
,
fypage
=
1
,
show_name
=
False
):
if
self
.
encoding
and
str
(
self
.
encoding
).
startswith
(
'gb'
):
key
=
quote
(
key
.
encode
(
'utf-8'
).
decode
(
'utf-8'
).
encode
(
self
.
encoding
,
'ignore'
))
# print(key)
pg
=
str
(
fypage
)
if
not
self
.
searchUrl
:
return
self
.
blank
()
...
...
jiexi/插萝莉慢.js
0 → 100644
浏览文件 @
68f8ca07
let
jxUrl
=
'
http://chaloli.cn/home/api?type=ys&uid=1&key=ekloswzABCGHKLOT58&url=
'
;
fetch_params
.
headers
.
Referer
=
jxUrl
;
try
{
// realUrl = null;
let
html
=
request
(
jxUrl
+
vipUrl
);
// log(html);
realUrl
=
jsp
.
pjfh
(
html
,
'
$..url
'
);
log
(
'
解析到真实播放地址:
'
+
realUrl
);
}
catch
(
e
)
{
log
(
'
解析发生错误:
'
+
e
.
message
);
realUrl
=
vipUrl
;
}
\ No newline at end of file
jiexi/江湖.js
浏览文件 @
68f8ca07
// realUrl = 重定向('http://211.99.99.236:4567/jhjson/ceshi.php?url='+vipUrl);
let
jxUrl
=
'
http://211.99.99.236:4567/jhjson/ceshi.php?url=
'
;
// let jxUrl = 'http://211.99.99.236:4567/jhjson/ceshi.php?url=';
let
jxUrl
=
'
http://jx.vipmv.co/json.php?token=123457&url=
'
;
fetch_params
.
headers
.
Referer
=
jxUrl
;
try
{
// realUrl = null;
...
...
js/custom_spider.jar
浏览文件 @
68f8ca07
无法预览此类型文件
js/version.txt
浏览文件 @
68f8ca07
3.9.20beta4
\ No newline at end of file
3.9.20beta5
\ No newline at end of file
readme.md
浏览文件 @
68f8ca07
...
...
@@ -47,6 +47,8 @@
[
dockerfile教程
](
https://blog.csdn.net/qq_46158060/article/details/125718218
)
[
获取本地设备信息
](
https://blog.csdn.net/cui_yonghua/article/details/125508991
)
[
获取本地设备信息
](
https://m.jb51.net/article/140716.htm
)
###### 2022/11/08
-
[X] 海盗听书js0空白是触发了网页的cloudfare5秒盾了,暂时无解
###### 2022/11/04
-
[X] 增加了 /lives?path=txt/lives/18fm.txt 和 /lives?path=txt/lives/月光.txt
###### 2022/11/03
...
...
utils/htmlParser.py
浏览文件 @
68f8ca07
...
...
@@ -11,9 +11,16 @@ from urllib.parse import urljoin
import
re
from
jsonpath
import
jsonpath
PARSE_CACHE
=
True
# 解析缓存
class
jsoup
:
def
__init__
(
self
,
MY_URL
=
''
):
self
.
MY_URL
=
MY_URL
self
.
pdfh_html
=
''
self
.
pdfa_html
=
''
self
.
pdfh_doc
=
None
self
.
pdfa_doc
=
None
def
test
(
self
,
text
:
str
,
string
:
str
):
searchObj
=
re
.
search
(
rf
'
{
text
}
'
,
string
,
re
.
M
|
re
.
I
)
...
...
@@ -23,7 +30,13 @@ class jsoup:
def
pdfh
(
self
,
html
,
parse
:
str
,
add_url
=
False
):
if
not
parse
:
return
''
doc
=
pq
(
html
)
if
PARSE_CACHE
:
if
self
.
pdfh_html
!=
html
:
self
.
pdfh_html
=
html
self
.
pdfh_doc
=
pq
(
html
)
doc
=
self
.
pdfh_doc
else
:
doc
=
pq
(
html
)
if
parse
==
'body&&Text'
or
parse
==
'Text'
:
text
=
doc
.
text
()
return
text
...
...
@@ -92,8 +105,15 @@ class jsoup:
parse
=
parse
.
split
(
'&&'
)
# 带&&的重新拼接
# print(f"{parse[0]},{self.test(':eq|:lt|:gt', parse[0])}")
parse
=
' '
.
join
([
parse
[
i
]
if
self
.
test
(
':eq|:lt|:gt'
,
parse
[
i
])
or
i
>=
len
(
parse
)
-
1
else
f
'
{
parse
[
i
]
}
:eq(0)'
for
i
in
range
(
len
(
parse
))])
# print(f'pdfa:{parse}')
doc
=
pq
(
html
)
print
(
f
'pdfa:
{
parse
}
'
)
# print(html)
if
PARSE_CACHE
:
if
self
.
pdfa_html
!=
html
:
self
.
pdfa_html
=
html
self
.
pdfa_doc
=
pq
(
html
)
doc
=
self
.
pdfa_doc
else
:
doc
=
pq
(
html
)
result
=
doc
(
parse
)
# 节点转字符串
# print(str(etree.tostring(result[0], pretty_print=True), 'utf-8'))
...
...
编辑
预览
Markdown
is supported
0%
请重试
或
添加新附件
.
添加附件
取消
You are about to add
0
people
to the discussion. Proceed with caution.
先完成此消息的编辑!
取消
想要评论请
注册
或
登录