Skip to content
项目
群组
代码片段
帮助
当前项目
正在载入...
登录 / 注册
切换导航面板
H
huazheng-project-flink
概览
概览
详情
活动
周期分析
版本库
仓库
文件
提交
分支
标签
贡献者
分支图
比较
统计图
问题
0
议题
0
列表
看板
标记
里程碑
合并请求
0
合并请求
0
CI / CD
CI / CD
流水线
作业
日程表
图表
维基
Wiki
代码片段
代码片段
成员
成员
折叠边栏
关闭边栏
活动
图像
聊天
创建新问题
作业
提交
问题看板
Open sidebar
huazheng
huazheng-project-flink
Commits
2d841984
提交
2d841984
authored
11月 23, 2020
作者:
guofeng
浏览文件
操作
浏览文件
下载
电子邮件补丁
差异文件
vbuk更新
上级
3cc1f54f
显示空白字符变更
内嵌
并排
正在显示
6 个修改的文件
包含
79 行增加
和
52 行删除
+79
-52
CheckDeleteServiceImpl.java
...roject/greenplum/service/impl/CheckDeleteServiceImpl.java
+30
-0
CheckUpdateServiceImpl.java
...roject/greenplum/service/impl/CheckUpdateServiceImpl.java
+33
-3
DeleteUpdateJobServiceImpl.java
...ct/greenplum/service/impl/DeleteUpdateJobServiceImpl.java
+0
-46
SapMapper.java
...main/java/com/huazheng/project/hana/mapper/SapMapper.java
+1
-1
SapMapper_hana.xml
src/main/resources/mapper/hana/SapMapper_hana.xml
+6
-1
spring-init.xml
src/main/resources/spring-init.xml
+9
-1
没有找到文件。
src/main/java/com/huazheng/project/greenplum/service/impl/CheckDeleteServiceImpl.java
浏览文件 @
2d841984
...
...
@@ -26,6 +26,7 @@ import com.huazheng.project.hana.model.Pa0002;
import
com.huazheng.project.hana.model.Vbak
;
import
com.huazheng.project.hana.model.Vbrk
;
import
com.huazheng.project.hana.model.Vbrp
;
import
com.huazheng.project.hana.model.Vbuk
;
import
com.huazheng.project.hana.model.Zsd06
;
import
com.huazheng.project.hana.model.Zsdfhzl
;
...
...
@@ -595,5 +596,34 @@ public class CheckDeleteServiceImpl {
redis1Template
.
opsForValue
().
set
(
"huazheng:checkDeleteError:Makt:rowNum"
,
SomeUtils
.
getErrorInfoFromException
(
e
));
}
}
public
void
selectVbukCheckByDelete
()
{
try
{
ValueOperations
<
String
,
String
>
opsForValue
=
redis1Template
.
opsForValue
();
opsForValue
.
setIfAbsent
(
"huazheng:checkDelete:Vbuk:rowNum"
,
"0"
);
String
rowNum
=
opsForValue
.
get
(
"huazheng:checkDelete:Vbuk:rowNum"
);
Vbuk
build
=
Vbuk
.
builder
().
rowNum
(
rowNum
).
build
();
List
<
Vbuk
>
list
=
gpMapper
.
selectVbukCheck
(
build
);
// 从数仓中查询一组数据
if
(
list
.
size
()
==
0
)
{
redis1Template
.
opsForValue
().
set
(
"huazheng:checkDelete:Vbuk:rowNum"
,
"0"
);
// 计数器复位
ThreadUtil
.
sleep
(
1000
);
// 没有数据了,休眠一下
}
list
.
forEach
(
target
->
{
// 遍历要检查的数据
Vbuk
source
=
sapMapper
.
selectVbukById
(
target
);
// 根据主键查询源库中的数据
String
operator
=
"none"
;
if
(
source
==
null
)
{
// 如果源库中没有数据
gpMapper
.
deleteVbuk
(
target
);
// 删除数仓中的数据
operator
=
"delete"
;
}
redis1Template
.
opsForValue
().
set
(
"huazheng:checkDelete:Vbuk:rowNum"
,
target
.
getRowNum
());
if
(!
operator
.
equals
(
"none"
))
{
log
.
info
(
String
.
format
(
"selectVbukcheckDelete --> rowNum:%s, operator:%s"
,
target
.
getRowNum
(),
operator
));
}
});
}
catch
(
Exception
e
)
{
redis1Template
.
opsForValue
().
set
(
"huazheng:checkDeleteError:Vbuk:rowNum"
,
SomeUtils
.
getErrorInfoFromException
(
e
));
}
}
}
src/main/java/com/huazheng/project/greenplum/service/impl/CheckUpdateServiceImpl.java
浏览文件 @
2d841984
...
...
@@ -27,6 +27,7 @@ import com.huazheng.project.hana.model.Pa0002;
import
com.huazheng.project.hana.model.Vbak
;
import
com.huazheng.project.hana.model.Vbrk
;
import
com.huazheng.project.hana.model.Vbrp
;
import
com.huazheng.project.hana.model.Vbuk
;
import
com.huazheng.project.hana.model.Zsd06
;
import
com.huazheng.project.hana.model.Zsdfhzl
;
...
...
@@ -350,6 +351,14 @@ public class CheckUpdateServiceImpl {
ThreadUtil
.
safeSleep
(
500
);
}
}
// 级联更新业务
List
<
Vbuk
>
sVbukList
=
sapMapper
.
cascadeVbukByLips
(
source
);
// 级联查询源库afko表
for
(
Vbuk
sVbuk
:
sVbukList
)
{
Vbuk
tVbuk
=
gpMapper
.
selectVbuk
(
sVbuk
);
// 查询目标库中afko表
cascadeVbukCheckByUpdate
(
sVbuk
,
tVbuk
);
// 级联更新afko表
}
ThreadUtil
.
safeSleep
(
500
);
}
}
...
...
@@ -721,6 +730,30 @@ public class CheckUpdateServiceImpl {
}
}
// 所属selectLipsCheckUpdate的级联
private
void
cascadeVbukCheckByUpdate
(
Vbuk
source
,
Vbuk
target
)
{
if
(
target
!=
null
)
{
// 目标库有数据
String
shash
=
SecureUtil
.
md5
(
JSONUtil
.
toJsonStr
(
source
));
// 源库中数据的hash结果
String
thash
=
target
.
getHashResult
();
// 数仓中数据的hash结果
if
(!
shash
.
equals
(
thash
))
{
// 如果hash结果不一致
source
.
setHashResult
(
shash
);
// ===============================
// ===============================
while
(
true
)
{
try
{
gpMapper
.
updateVbuk
(
source
);
// 更新数据到数仓中
break
;
}
catch
(
RuntimeException
e
)
{
log
.
error
(
e
.
getMessage
());
ThreadUtil
.
safeSleep
(
500
);
}
}
ThreadUtil
.
safeSleep
(
500
);
}
}
}
// 所属selectMaraCheckUpdate的级联
private
void
cascadeMaktCheckByUpdate
(
Makt
source
,
Makt
target
)
{
if
(
target
!=
null
)
{
// 目标库有数据
...
...
@@ -754,9 +787,6 @@ public class CheckUpdateServiceImpl {
}
}
}
// 所属selectMaraCheckUpdate的级联
private
void
cascadeAuspCheckByUpdate
(
Ausp
source
,
Ausp
target
)
{
if
(
target
!=
null
)
{
// 目标库有数据
...
...
src/main/java/com/huazheng/project/greenplum/service/impl/DeleteUpdateJobServiceImpl.java
浏览文件 @
2d841984
...
...
@@ -39,7 +39,6 @@ import com.huazheng.project.hana.model.Vbap;
import
com.huazheng.project.hana.model.VbapAdv
;
import
com.huazheng.project.hana.model.Vbep
;
import
com.huazheng.project.hana.model.Vbpa
;
import
com.huazheng.project.hana.model.Vbuk
;
import
com.huazheng.project.hana.model.Zmdpc
;
import
com.huazheng.project.hana.model.Zpoedit
;
import
com.huazheng.project.hana.model.Zsd06
;
...
...
@@ -912,7 +911,6 @@ public class DeleteUpdateJobServiceImpl {
selectT023tCheck
();
// 31
selectVbepCheck
();
// 33
selectVbpaCheck
();
// 34
selectVbukCheck
();
// 37
selectZmdpcCheck
();
// 38
selectTvkbtCheck
();
//
selectAfvcCheck
();
...
...
@@ -1525,50 +1523,6 @@ public class DeleteUpdateJobServiceImpl {
redis1Template
.
opsForValue
().
set
(
"huazheng:checkError:Vbpa:rowNum"
,
getErrorInfoFromException
(
e
));
}
}
private
void
selectVbukCheck
()
{
try
{
ValueOperations
<
String
,
String
>
opsForValue
=
redis1Template
.
opsForValue
();
opsForValue
.
setIfAbsent
(
"huazheng:check:Vbuk:rowNum"
,
"0"
);
String
rowNum
=
opsForValue
.
get
(
"huazheng:check:Vbuk:rowNum"
);
Vbuk
build
=
Vbuk
.
builder
().
rowNum
(
rowNum
).
build
();
List
<
Vbuk
>
list
=
gpMapper
.
selectVbukCheck
(
build
);
// 从数仓中查询一组数据
if
(
list
.
size
()
==
0
)
{
redis1Template
.
opsForValue
().
set
(
"huazheng:check:Vbuk:rowNum"
,
"0"
);
// 计数器复位
ThreadUtil
.
sleep
(
1000
);
// 没有数据了,休眠一下
}
list
.
forEach
(
target
->
{
// 遍历要检查的数据
Vbuk
source
=
sapMapper
.
selectVbukById
(
target
);
// 根据主键查询源库中的数据
String
operator
=
"none"
;
if
(
source
==
null
)
{
// 如果源库中没有数据
gpMapper
.
deleteVbuk
(
target
);
// 删除数仓中的数据
operator
=
"delete"
;
}
else
{
// 源库中有数据
String
shash
=
SecureUtil
.
md5
(
JSONUtil
.
toJsonStr
(
source
));
// 源库中数据的hash结果
String
thash
=
target
.
getHashResult
();
// 数仓中数据的hash结果
if
(!
shash
.
equals
(
thash
))
{
// 如果hash结果不一致
source
.
setHashResult
(
shash
);
// ===============================
// ===============================
while
(
true
)
{
try
{
gpMapper
.
updateVbuk
(
source
);
// 更新数据到数仓中
break
;
}
catch
(
RuntimeException
e
)
{
log
.
error
(
e
.
getMessage
());
ThreadUtil
.
safeSleep
(
500
);
}
}
ThreadUtil
.
safeSleep
(
500
);
}
}
redis1Template
.
opsForValue
().
set
(
"huazheng:check:Vbuk:rowNum"
,
target
.
getRowNum
());
if
(!
operator
.
equals
(
"none"
))
{
log
.
info
(
String
.
format
(
"selectVbukCheck --> rowNum:%s, operator:%s"
,
target
.
getRowNum
(),
operator
));
}
});
}
catch
(
Exception
e
)
{
redis1Template
.
opsForValue
().
set
(
"huazheng:checkError:Vbuk:rowNum"
,
getErrorInfoFromException
(
e
));
}
}
private
void
selectZmdpcCheck
()
{
try
{
ValueOperations
<
String
,
String
>
opsForValue
=
redis1Template
.
opsForValue
();
...
...
src/main/java/com/huazheng/project/hana/mapper/SapMapper.java
浏览文件 @
2d841984
...
...
@@ -109,7 +109,7 @@ public interface SapMapper {
public
List
<
Ausp
>
cascadeAuspByMara
(
Mara
mara
);
public
List
<
Konv
>
cascadeKonvByVbak
(
Vbak
vbak
);
public
List
<
Makt
>
cascadeMaktByMara
(
Mara
mara
);
public
List
<
Vbuk
>
cascadeVbukByLips
(
Lips
lips
);
// ......
public
Bkpf
selectBkpfById
(
Bkpf
target
);
...
...
src/main/resources/mapper/hana/SapMapper_hana.xml
浏览文件 @
2d841984
...
...
@@ -471,7 +471,12 @@
from ${hana_user}.Makt
where matnr = #{matnr} ${hana_mandt}
</select>
<select
id=
"cascadeVbukByLips"
parameterType=
"Lips"
resultType=
"Vbuk"
>
select
vbeln, wbstk, kostk, mandt
from ${hana_user}.vbuk
where vbeln = #{vbeln} ${hana_mandt}
</select>
...
...
src/main/resources/spring-init.xml
浏览文件 @
2d841984
...
...
@@ -969,7 +969,15 @@
</property>
<property
name=
"cronExpression"
value=
"* * * * * ?"
/>
</bean>
<bean
class=
"org.springframework.scheduling.quartz.CronTriggerFactoryBean"
>
<property
name=
"jobDetail"
>
<bean
parent=
"methodJobDetail"
>
<property
name=
"targetObject"
ref=
"checkDeleteServiceImpl"
/>
<property
name=
"targetMethod"
value=
"selectVbukCheckByDelete"
/>
</bean>
</property>
<property
name=
"cronExpression"
value=
"* * * * * ?"
/>
</bean>
...
...
编写
预览
Markdown
格式
0%
重试
或
添加新文件
添加附件
取消
您添加了
0
人
到此讨论。请谨慎行事。
请先完成此评论的编辑!
取消
请
注册
或者
登录
后发表评论