• SparkSql 不支持Date Format (支持Timestamp)


    最近项目中需要用到sparksql ,需要查询sql Date类型, 无奈,官方现阶段 1.6.0 还不支持Date类型,不过支持Timestamp类型,所以问题可以解决了。

    1.解析

    SimpleDateFormat dateFormat = new SimpleDateFormat("yyyy-MM-dd HH:mm:ss");
    Date beginDate = null;
    Date endDate = null;
    try {
        beginDate = (Date) dateFormat.parse(param3[0]);
        endDate = dateFormat.parse(param3[1]);
    } catch (ParseException e) {
        e.printStackTrace();
    }
    System.out.println("beginDate.getTime()"+ beginDate.getTime()+"-----" + endDate.getTime());
    

    String sql = "SELECT * FROM carMonitorBean WHERE DCOLLECTIONDATE >= " + beginDate.getTime() + " AND DCOLLECTIONDATE <="
            +endDate.getTime()+ " AND HOURTIME >=3 AND HOURTIME <=5";

    2. spark Sql 可以参看官网提供的文档如下:

    http://spark.apache.org/docs/latest/sql-programming-guide.html#sql

    如对您有帮助,请多多支持。

  • 相关阅读:
    优雅的将hbase的数据导入hive表
    大数据技术-spark+hive+hbase研究
    第0001课
    线程池-实际生产使用
    H5学习系列之文件读取API--本文转自http://blog.csdn.net/jackfrued/article/details/8967667
    H5学习系列之Communication API
    H5学习系列之Geolocation API
    H5学习系列之Audio和Video
    H5学习系列之webSocket入门
    百度UEditor基本使用
  • 原文地址:https://www.cnblogs.com/chaoren399/p/5158955.html
Copyright © 2020-2023  润新知