温馨提示×

温馨提示×

您好,登录后才能下订单哦!

密码登录×
登录注册×
其他方式登录
点击 登录注册 即表示同意《亿速云用户服务条款》

怎么实现ut8数据库过滤特殊字符

发布时间:2021-11-16 11:54:24 来源:亿速云 阅读:149 作者:iii 栏目:大数据

本篇内容介绍了“怎么实现ut8数据库过滤特殊字符”的有关知识,在实际案例的操作过程中,不少人都会遇到这样的困境,接下来就让小编带领大家学习一下如何处理这些情况吧!希望大家仔细阅读,能够学有所成!

ut8数据库无法保存超多3个字节的utf字符,手写了一个过滤器,可指定过滤最大字符长度

UTF-8编码规则 1字节 0xxxxxxx 2字节 110xxxxx 10xxxxxx 3字节 1110xxxx 10xxxxxx 10xxxxxx 4字节 11110xxx 10xxxxxx 10xxxxxx 10xxxxxx 5字节 111110xx 10xxxxxx 10xxxxxx 10xxxxxx 10xxxxxx 6字节 1111110x 10xxxxxx 10xxxxxx 10xxxxxx 10xxxxxx 10xxxxxx

实现

public static String utf8M(String str, int m) {
        byte[] bytes = str.getBytes(KtIo.utf8());
        int len = bytes.length;
        int off = 0;
        byte[] buffer = null;
        byte b;
        int s;
        int j, k;
        int lst = len - 1;
        for (int i = 0; i < len; i++) {
            b = bytes[i];
            s = b & 0XFF;
            if (s < 192) {
                if (buffer != null) {
                    buffer[off++] = b;
                }

            } else {
                if (s < 224) {
                    j = 1;

                } else if (s < 240) {
                    j = 2;

                } else if (s < 248) {
                    j = 3;

                } else if (s < 252) {
                    j = 4;

                } else if (b < 254) {
                    j = 5;

                } else {
                    i += 6;
                    continue;
                }

                if (j < m) {
                    // 允许字符长度
                    j += i;
                    if (buffer != null) {
                        buffer[off++] = b;
                        k = j < lst ? j : lst;
                        for (i++; i <= k; i++) {
                            buffer[off++] = bytes[i];
                        }
                    }

                    i = j;

                } else {
                    // 过滤字符长度
                    if (buffer == null) {
                        buffer = bytes;
                        off = i;
                    }

                    i += j;
                }
            }
        }

        return buffer == null ? str : new String(buffer, 0, off, KtIo.charset());
    }

测试

public void test() throws IOException {
        System.out.println(KtStr.utf8M("sda\uD83D\uDC16♎♏♐♑大啊\uD83D\uDC01\uD83D\uDC02\uD83D\uDC05\uD83D\uDC07\uD83D\uDC09\uD83D\uDC0D\uD83D\uDC0E\uD83D\uDC10\uD83D\uDC12\uD83D\uDC13\uD83D\uDC15\uD83D\uDC16子\uD83C\uDF40木\uD83C\uDF40青\uD83C\uDF40澄\uD83C\uDF40", 3));
    }

“怎么实现ut8数据库过滤特殊字符”的内容就介绍到这里了,感谢大家的阅读。如果想了解更多行业相关的知识可以关注亿速云网站,小编将为大家输出更多高质量的实用文章!

向AI问一下细节

免责声明:本站发布的内容(图片、视频和文字)以原创、转载和分享为主,文章观点不代表本网站立场,如果涉及侵权请联系站长邮箱:is@yisu.com进行举报,并提供相关证据,一经查实,将立刻删除涉嫌侵权内容。

AI