Skip to content
体验新版
项目
组织
正在加载...
登录
切换导航
打开侧边栏
Metz
oceanbase
提交
54e159ca
O
oceanbase
项目概览
Metz
/
oceanbase
与 Fork 源项目一致
Fork自
oceanbase / oceanbase
通知
1
Star
0
Fork
0
代码
文件
提交
分支
Tags
贡献者
分支图
Diff
Issue
0
列表
看板
标记
里程碑
合并请求
0
DevOps
流水线
流水线任务
计划
Wiki
0
Wiki
分析
仓库
DevOps
项目成员
Pages
O
oceanbase
项目概览
项目概览
详情
发布
仓库
仓库
文件
提交
分支
标签
贡献者
分支图
比较
Issue
0
Issue
0
列表
看板
标记
里程碑
合并请求
0
合并请求
0
Pages
DevOps
DevOps
流水线
流水线任务
计划
分析
分析
仓库分析
DevOps
Wiki
0
Wiki
成员
成员
收起侧边栏
关闭侧边栏
动态
分支图
创建新Issue
流水线任务
提交
Issue看板
体验新版 GitCode,发现更多精彩内容 >>
提交
54e159ca
编写于
8月 11, 2021
作者:
B
bf0
提交者:
wangzelin.wzl
8月 11, 2021
浏览文件
操作
浏览文件
下载
电子邮件补丁
差异文件
fix charset convert core
上级
0192a4d2
变更
1
隐藏空白更改
内联
并排
Showing
1 changed file
with
33 addition
and
34 deletion
+33
-34
deps/oblib/src/lib/charset/ob_charset.cpp
deps/oblib/src/lib/charset/ob_charset.cpp
+33
-34
未找到文件。
deps/oblib/src/lib/charset/ob_charset.cpp
浏览文件 @
54e159ca
...
...
@@ -2250,44 +2250,43 @@ int ObCharset::charset_convert(ObIAllocator& alloc, const ObString& in, const Ob
if
(
OB_ISNULL
(
res_buf
))
{
ret
=
OB_ALLOCATE_MEMORY_FAILED
;
LOG_WARN
(
"alloc memory failed"
,
K
(
ret
));
}
else
if
(
OB_FAIL
(
charset_convert
(
src_cs_type
,
in
.
ptr
(),
in
.
length
(),
dst_cs_type
,
res_buf
,
res_buf_len
,
res_len
)))
{
}
else
{
out
.
assign_ptr
(
res_buf
,
res_len
);
}
// handle replace unknown character
if
(
OB_FAIL
(
ret
))
{
LOG_WARN
(
"convert charset failed"
,
K
(
ret
),
K
(
in
),
K
(
src_cs_type
),
K
(
dst_cs_type
),
KPHEX
(
in
.
ptr
(),
in
.
length
()));
if
(
!!
(
convert_flag
&
REPLACE_UNKNOWN_CHARACTER
))
{
int32_t
in_offset
=
0
;
int64_t
res_buf_offset
=
0
;
ObString
question_mark
=
ObCharsetUtils
::
get_const_str
(
dst_cs_type
,
'?'
);
while
(
in_offset
<
in
.
length
()
&&
res_buf_offset
+
question_mark
.
length
()
<=
res_buf_len
)
{
int64_t
offset
=
ObCharset
::
charpos
(
src_cs_type
,
in
.
ptr
()
+
in_offset
,
in
.
length
()
-
in_offset
,
1
);
ret
=
ObCharset
::
charset_convert
(
src_cs_type
,
in
.
ptr
()
+
in_offset
,
offset
,
dst_cs_type
,
res_buf
+
res_buf_offset
,
res_buf_len
-
res_buf_offset
,
res_len
);
in_offset
+=
offset
;
if
(
OB_SUCCESS
==
ret
)
{
res_buf_offset
+=
res_len
;
if
(
OB_SUCC
(
charset_convert
(
src_cs_type
,
in
.
ptr
(),
in
.
length
(),
dst_cs_type
,
res_buf
,
res_buf_len
,
res_len
)))
{
out
.
assign_ptr
(
res_buf
,
res_len
);
}
else
{
// handle replace unknown character
LOG_WARN
(
"convert charset failed"
,
K
(
ret
),
K
(
in
),
K
(
src_cs_type
),
K
(
dst_cs_type
),
KPHEX
(
in
.
ptr
(),
in
.
length
()));
if
(
!!
(
convert_flag
&
REPLACE_UNKNOWN_CHARACTER
))
{
int32_t
in_offset
=
0
;
int64_t
res_buf_offset
=
0
;
ObString
question_mark
=
ObCharsetUtils
::
get_const_str
(
dst_cs_type
,
'?'
);
while
(
in_offset
<
in
.
length
()
&&
res_buf_offset
+
question_mark
.
length
()
<=
res_buf_len
)
{
int64_t
offset
=
ObCharset
::
charpos
(
src_cs_type
,
in
.
ptr
()
+
in_offset
,
in
.
length
()
-
in_offset
,
1
);
ret
=
ObCharset
::
charset_convert
(
src_cs_type
,
in
.
ptr
()
+
in_offset
,
offset
,
dst_cs_type
,
res_buf
+
res_buf_offset
,
res_buf_len
-
res_buf_offset
,
res_len
);
in_offset
+=
offset
;
if
(
OB_SUCCESS
==
ret
)
{
res_buf_offset
+=
res_len
;
}
else
{
MEMCPY
(
res_buf
+
res_buf_offset
,
question_mark
.
ptr
(),
question_mark
.
length
());
res_buf_offset
+=
question_mark
.
length
();
}
}
if
(
in_offset
<
in
.
length
())
{
ret
=
OB_SIZE_OVERFLOW
;
LOG_WARN
(
"buf size over flow"
,
K
(
ret
),
K
(
in
),
KPHEX
(
in
.
ptr
(),
in
.
length
()));
}
else
{
MEMCPY
(
res_buf
+
res_buf_offset
,
question_mark
.
ptr
(),
question_mark
.
length
());
res_buf_offset
+=
question_mark
.
length
();
res_len
=
res_buf_offset
;
out
.
assign_ptr
(
res_buf
,
res_len
);
ret
=
OB_SUCCESS
;
}
}
if
(
in_offset
<
in
.
length
())
{
ret
=
OB_SIZE_OVERFLOW
;
LOG_WARN
(
"buf size over flow"
,
K
(
ret
),
K
(
in
),
KPHEX
(
in
.
ptr
(),
in
.
length
()));
}
else
{
res_len
=
res_buf_offset
;
out
.
assign_ptr
(
res_buf
,
res_len
);
ret
=
OB_SUCCESS
;
}
}
}
}
...
...
编辑
预览
Markdown
is supported
0%
请重试
或
添加新附件
.
添加附件
取消
You are about to add
0
people
to the discussion. Proceed with caution.
先完成此消息的编辑!
取消
想要评论请
注册
或
登录