Skip to content
项目
群组
代码片段
帮助
正在加载...
登录
切换导航
X
XXL-JOB
项目
项目
详情
活动
周期分析
仓库
仓库
文件
提交
分支
标签
贡献者
分枝图
比较
统计图
议题
0
议题
0
列表
看板
标记
里程碑
合并请求
0
合并请求
0
CI / CD
CI / CD
流水线
作业
日程
统计图
Wiki
Wiki
代码片段
代码片段
成员
成员
折叠边栏
关闭边栏
活动
分枝图
统计图
创建新议题
作业
提交
议题看板
打开侧边栏
靳帅
XXL-JOB
Commits
e73be817
提交
e73be817
authored
11月 20, 2019
作者:
xuxueli
浏览文件
操作
浏览文件
下载
电子邮件补丁
差异文件
调度中心日志删除优化,改为分页获取ID并根据ID删除的方式,避免批量删除海量日志导致死锁问题
上级
ada47e5a
隐藏空白字符变更
内嵌
并排
正在显示
4 个修改的文件
包含
42 行增加
和
22 行删除
+42
-22
XXL-JOB官方文档.md
doc/XXL-JOB官方文档.md
+3
-2
JobLogController.java
...n/java/com/xxl/job/admin/controller/JobLogController.java
+8
-1
XxlJobLogDao.java
...min/src/main/java/com/xxl/job/admin/dao/XxlJobLogDao.java
+6
-4
XxlJobLogMapper.xml
...min/src/main/resources/mybatis-mapper/XxlJobLogMapper.xml
+25
-15
没有找到文件。
doc/XXL-JOB官方文档.md
浏览文件 @
e73be817
...
...
@@ -1590,8 +1590,8 @@ Tips: 历史版本(V1.3.x)目前已经Release至稳定版本, 进入维护阶段
-
19、调度中心移除SQL中的 "now()" 函数;集群部署时不再依赖DB时钟,仅需要保证调度中心应用节点时钟一致即可;
-
20、xxl-rpc服务端线程优化,降低线程内存开销;
-
21、调度中心回调API服务改为restful方式;
-
22、
[
ING
]
调度日志优化:支持设置日志保留天数,过期日志天维度记录报表,并清理;调度报表汇总实时数据和报表
;
-
23、
[
ING
]
调度
中心日志删除,改为分页获取ID,根据ID删除的方式
;
-
22、
调度中心日志删除优化,改为分页获取ID并根据ID删除的方式,避免批量删除海量日志导致死锁问题
;
-
23、
[
ING
]
调度
日志优化:支持设置日志保留天数,过期日志天维度记录报表,并清理;调度报表汇总实时数据和报表
;
...
...
@@ -1632,6 +1632,7 @@ Tips: 历史版本(V1.3.x)目前已经Release至稳定版本, 进入维护阶段
-
34、通讯调整;双向HTTP,回调和其他API自定义AccessToken,Restful,执行器复用容器端口;
-
35、父子任务参数传递;流程任务等,透传动态参数;
-
36、任务操作API服务调整为和回调服务一致,降低接入成本;
-
37、新增执行器描述、任务描述属性;
## 七、其他
...
...
xxl-job-admin/src/main/java/com/xxl/job/admin/controller/JobLogController.java
浏览文件 @
e73be817
...
...
@@ -216,7 +216,14 @@ public class JobLogController {
return
new
ReturnT
<
String
>(
ReturnT
.
FAIL_CODE
,
I18nUtil
.
getString
(
"joblog_clean_type_unvalid"
));
}
xxlJobLogDao
.
clearLog
(
jobGroup
,
jobId
,
clearBeforeTime
,
clearBeforeNum
);
List
<
Long
>
logIds
=
null
;
do
{
logIds
=
xxlJobLogDao
.
findClearLogIds
(
jobGroup
,
jobId
,
clearBeforeTime
,
clearBeforeNum
,
1000
);
if
(
logIds
!=
null
&&
logIds
.
size
()>
0
)
{
xxlJobLogDao
.
clearLog
(
logIds
);
}
}
while
(
logIds
!=
null
&&
logIds
.
size
()>
0
);
return
ReturnT
.
SUCCESS
;
}
...
...
xxl-job-admin/src/main/java/com/xxl/job/admin/dao/XxlJobLogDao.java
浏览文件 @
e73be817
...
...
@@ -46,10 +46,12 @@ public interface XxlJobLogDao {
public
List
<
Map
<
String
,
Object
>>
triggerCountByDay
(
@Param
(
"from"
)
Date
from
,
@Param
(
"to"
)
Date
to
);
public
int
clearLog
(
@Param
(
"jobGroup"
)
int
jobGroup
,
@Param
(
"jobId"
)
int
jobId
,
@Param
(
"clearBeforeTime"
)
Date
clearBeforeTime
,
@Param
(
"clearBeforeNum"
)
int
clearBeforeNum
);
public
List
<
Long
>
findClearLogIds
(
@Param
(
"jobGroup"
)
int
jobGroup
,
@Param
(
"jobId"
)
int
jobId
,
@Param
(
"clearBeforeTime"
)
Date
clearBeforeTime
,
@Param
(
"clearBeforeNum"
)
int
clearBeforeNum
,
@Param
(
"pagesize"
)
int
pagesize
);
public
int
clearLog
(
@Param
(
"logIds"
)
List
<
Long
>
logIds
);
public
List
<
Long
>
findFailJobLogIds
(
@Param
(
"pagesize"
)
int
pagesize
);
...
...
xxl-job-admin/src/main/resources/mybatis-mapper/XxlJobLogMapper.xml
浏览文件 @
e73be817
...
...
@@ -186,8 +186,8 @@
ORDER BY triggerDay
</select>
<
delete
id=
"clearLo
g"
>
delete from
xxl_job_log
<
select
id=
"findClearLogIds"
resultType=
"lon
g"
>
SELECT id FROM
xxl_job_log
<trim
prefix=
"WHERE"
prefixOverrides=
"AND | OR"
>
<if
test=
"jobGroup gt 0"
>
AND job_group = #{jobGroup}
...
...
@@ -200,22 +200,32 @@
</if>
<if
test=
"clearBeforeNum gt 0"
>
AND id NOT in(
SELECT id FROM(
SELECT id FROM xxl_job_log AS t
<trim
prefix=
"WHERE"
prefixOverrides=
"AND | OR"
>
<if
test=
"jobGroup gt 0"
>
AND t.job_group = #{jobGroup}
</if>
<if
test=
"jobId gt 0"
>
AND t.job_id = #{jobId}
</if>
</trim>
ORDER BY t.trigger_time desc
LIMIT 0, #{clearBeforeNum}
) t1
SELECT id FROM(
SELECT id FROM xxl_job_log AS t
<trim
prefix=
"WHERE"
prefixOverrides=
"AND | OR"
>
<if
test=
"jobGroup gt 0"
>
AND t.job_group = #{jobGroup}
</if>
<if
test=
"jobId gt 0"
>
AND t.job_id = #{jobId}
</if>
</trim>
ORDER BY t.trigger_time desc
LIMIT 0, #{clearBeforeNum}
) t1
)
</if>
</trim>
order by id asc
LIMIT #{pagesize}
</select>
<delete
id=
"clearLog"
>
delete from xxl_job_log
WHERE id in
<foreach
collection=
"logIds"
item=
"item"
open=
"("
close=
")"
separator=
","
>
#{item}
</foreach>
</delete>
<select
id=
"findFailJobLogIds"
resultType=
"long"
>
...
...
编写
预览
Markdown
格式
0%
重试
或
添加新文件
添加附件
取消
您添加了
0
人
到此讨论。请谨慎行事。
请先完成此评论的编辑!
取消
请
注册
或者
登录
后发表评论