MaxCompute UDF系列之身份证校验及15位身份证号码转换成18位-阿里云开发者社区

开发者社区> 阿里巴巴大数据计算> 正文
登录阅读全文

MaxCompute UDF系列之身份证校验及15位身份证号码转换成18位

简介: 为了验证一些老证件上的身份证号码到底是不是本人,今天为大家提供一个15位身份证号码转换成18位的MaxCompute的UDF,下载地址见附件。 效果如下: MaxCompute UDF代码如下: /*** * 身份证号码构成:6位地址编码+8位生日+3位顺序码

为了验证一些老证件上的身份证号码到底是不是本人,今天为大家提供一个15位身份证号码转换成18位的MaxCompute的UDF,下载地址见附件。


效果如下:






MaxCompute UDF代码如下:


/*** 
 * 身份证号码构成:6位地址编码+8位生日+3位顺序码+1位校验码 
 * 验证15位,18位证件号码是否有效;15位号码将直接转为18位;
 * 校验身份证号码除了校验位是否为数值,校验省份、出生日期
 * 校验位不正确的会被正确的替代
 * 出生日期逻辑有效性,即是否1900年前出生,是否当前日期后出生未校验
 * 1984年4月6日国务院发布《中华人民共和国居民身份证试行条例》,并且开始颁发第一代居民身份证,按寿命120岁验证,年龄区间是1864年至今。
 * 15位证件号码转换未考虑1900年前出生的人
 ***/
package com.yinlin.udf.dev;
import java.util.regex.Pattern;
import java.util.regex.Matcher;
import java.text.SimpleDateFormat;
import java.util.Date;
import com.aliyun.odps.udf.UDF;

public final class IdenNum extends UDF {
  private final static int NEW_CARD_NUMBER_LENGTH = 18;
  private final static int OLD_CARD_NUMBER_LENGTH = 15;
  private final static int YEAR_BEGIN = 1864;
  private final static char[] VERIFY_CODE = { '1', '0', 'X', '9', '8', '7','6', '5', '4', '3', '2' }; // 18位身份证中最后一位校验码
  private final static int[] VERIFY_CODE_WEIGHT = { 7, 9, 10, 5, 8, 4, 2, 1,6, 3, 7, 9, 10, 5, 8, 4, 2 };// 18位身份证中,各个数字的生成校验码时的权值
  private final static int[] PROVINCE_CODE = { 11, 12, 13, 14, 15, 21, 22,23, 31, 32, 33, 34, 35, 36, 37, 41, 42, 43, 44, 45, 46, 50, 51, 52,53, 54, 61, 62, 63, 64, 65, 71, 81, 82, 91 };// 省份编码
  private final static Pattern pattern = Pattern.compile("[0-9]*");
  private final static ThreadLocal<SimpleDateFormat> threadLocal = new ThreadLocal<SimpleDateFormat>() {
    protected SimpleDateFormat initialValue() {
      return null;// 直接返回null
    }
  };

  public String evaluate(String cardNumber) {
    if (cardNumber == null) {return null;}// 为NULL
    Date dNow = new Date( );
    SimpleDateFormat ft = new SimpleDateFormat ("yyyy");
    int YEAR_END = Integer.parseInt(ft.format(dNow));
    cardNumber = cardNumber.trim();
    if (cardNumber.length() == 0) {return null;}// 空字符串
    if (NEW_CARD_NUMBER_LENGTH != cardNumber.length() &
        OLD_CARD_NUMBER_LENGTH != cardNumber.length()) {return null;}// 长度不正确
    if (NEW_CARD_NUMBER_LENGTH == cardNumber.length()) {
      if (isNumeric(cardNumber.substring(0, 17)) == false) {return null;} // 前17位为数值
      if (IdenNum.calculateVerifyCode(cardNumber) != cardNumber.charAt(17)) {
         cardNumber = contertToNewCardNumber(cardNumber,NEW_CARD_NUMBER_LENGTH);
      }// 校验位修正
      if (isProvince(cardNumber.substring(0, 2)) == false) {return null;}// 省份编码在已知集合中
      if (isDate(cardNumber.substring(6, 14)) == false) {return null;}// 非法日期转换前后不一致
      int birthdayYear = Integer.parseInt(cardNumber.substring(6, 10));
      if (birthdayYear < YEAR_BEGIN) {return null;}// 为NULL
      if (birthdayYear > YEAR_END) {return null;}// 为NULL
    }
    if (OLD_CARD_NUMBER_LENGTH == cardNumber.length()) {
      if (isNumeric(cardNumber) == false) {return null;} // 前15位为数值
      if (isProvince(cardNumber.substring(0, 2)) == false) {return null;}// 省份编码在已知集合中
      if (isDate("19" + cardNumber.substring(6, 12)) == false) {return null;}// 非法日期转换前后不一致
      cardNumber = contertToNewCardNumber(cardNumber,OLD_CARD_NUMBER_LENGTH);
    }
    return cardNumber;
  }

  /**
   * 校验码(第十八位数):
   * 
   * 十七位数字本体码加权求和公式 S = Sum(Ai * Wi), i = 0...16 ,先对前17位数字的权求和;
   * Ai:表示第i位置上的身份证号码数字值 Wi:表示第i位置上的加权因子 Wi: 7 9 10 5 8 4 2 1 6 3 7 9 10 5 8 4
   * 2; 计算模 Y = mod(S, 11) 通过模得到对应的校验码 Y: 0 1 2 3 4 5 6 7 8 9 10 校验码: 1 0 X 9
   * 8 7 6 5 4 3 2
   * 
   * @param cardNumber
   * @return
   */
  private static char calculateVerifyCode(CharSequence cardNumber) {
    int sum = 0;
    for (int i = 0; i < NEW_CARD_NUMBER_LENGTH - 1; i++) {
      char ch = cardNumber.charAt(i);
      sum += ((int) (ch - '0')) * VERIFY_CODE_WEIGHT[i];
    }
    return VERIFY_CODE[sum % 11];
  }

  /**
   * A-把15位身份证号码转换到18位身份证号码 15位身份证号码与18位身份证号码的区别为:
   * 1、15位身份证号码中,"出生年份"字段是2位,转换时需要补入"19",表示20世纪
   * 2、15位身份证无最后一位校验码。18位身份证中,校验码根据根据前17位生成
   * B-18位身份证号码校验位修复
   * @param cardNumber
   * @return
   */
  private static String contertToNewCardNumber(String CardNumber,int cardNumberLength) {
    StringBuilder buf = new StringBuilder(NEW_CARD_NUMBER_LENGTH);
    if       (cardNumberLength == NEW_CARD_NUMBER_LENGTH){
      buf.append(CardNumber.substring(0, 17));
      buf.append(IdenNum.calculateVerifyCode(buf));
    }else if (cardNumberLength == OLD_CARD_NUMBER_LENGTH){
      buf.append(CardNumber.substring(0, 6));
      buf.append("19");
      buf.append(CardNumber.substring(6));
      buf.append(IdenNum.calculateVerifyCode(buf));
    }
    return buf.toString();
  }

  /**
   * 功能:判断字符串是否为数字
   * 
   * @param str
   * @return
   */
  private static boolean isNumeric(String str) {
    Matcher isNum = pattern.matcher(str);
    if (isNum.matches()) {
      return true;
    } else {
      return false;
    }
  }

  /**
   * 功能:判断前两位是否正确
   * 
   * @param Province
   * @return
   */
  private static boolean isProvince(String Province) {
    int prov = Integer.parseInt(Province);
    for (int i = 0; i < PROVINCE_CODE.length; i++) {
      if (PROVINCE_CODE[i] == prov) {
        return true;
      }
    }
    return false;
  }

  public static SimpleDateFormat getDateFormat() {
    SimpleDateFormat df = (SimpleDateFormat) threadLocal.get();
    if (df == null) {
      df = new SimpleDateFormat("yyyyMMdd");
      df.setLenient(false);
      threadLocal.set(df);
    }
    return df;
  }

  /**
   * 功能:判断出生日期字段是否为日期
   * 
   * @param str
   * @return
   */
  private static boolean isDate(String birthDate) {
    try {
      SimpleDateFormat sdf = getDateFormat();
      Date cacheBirthDate = sdf.parse(birthDate);
      if (sdf.format(cacheBirthDate).equals(birthDate) == false) {return false;}// 非法日期转换前后不一致
    } catch (Exception e) {
      return false;
    }
    return true;
  }

}


使用方法:

1、通过Eclipse将IdenNum.java编译成Jar包,命名为IdenNum_udf.jar。


2、通过大数据开发套件,上传资源IdenNum_udf.jar;




3、通过大数据开发套件,引用第二步上传的IdenNum_udf.jar资源,注册idennum函数;


4、通过大数据开发套件新建SQL脚本,输入SQL函数进行测试。


--创建虚拟表
CREATE TABLE IF NOT EXISTS dual (id STRING);
insert into table dual select '1' from (select count(1) from dual) t;

---idennum身份证有效性识别
select idennum('1101057109235829XX') from yinlin_demo.dual limit 1;

---idennum身份证15位转换18位
select idennum('110105710923582') from yinlin_demo.dual limit 1;


通过MaxCompute CLi客户端(Mac环境)

1、登陆CLI客户端(下载odps_public)


./odpscmd


2、添加Jar包


add jar ~/Downloads/IdenNum_udf.jar;

3、引用Jar并注册函数idennum


CREATE FUNCTION idennum AS com.yinlin.udf.dev.IdenNum USING IdenNum_udf.jar

4、验证结果


select idennum('110105710923582') 



到此为止,实验完成。


常见问题

Q:无结果?

我们在创建虚拟dual表的时候,一定要保证表中有数据。


Q:无法找到函数?

利用大数据开发套件注册函数的时候需要包名+类名,否则会找不到类。



阿里巴巴大数据-玩家社区 https://yq.aliyun.com/teams/6/

---阿里大数据博文,问答,社群,实践,有朋自远方来,不亦说乎……

bba01b493e1c5d904e882b1c380673c6ebe49a98

附件下载:https://developer.aliyun.com/topic/download?id=598

版权声明:本文内容由阿里云实名注册用户自发贡献,版权归原作者所有,阿里云开发者社区不拥有其著作权,亦不承担相应法律责任。具体规则请查看《阿里云开发者社区用户服务协议》和《阿里云开发者社区知识产权保护指引》。如果您发现本社区中有涉嫌抄袭的内容,填写侵权投诉表单进行举报,一经查实,本社区将立刻删除涉嫌侵权内容。

分享:
阿里巴巴大数据计算
使用钉钉扫一扫加入圈子
+ 订阅

阿里大数据官方技术圈

官方博客
链接