热门标签 | HotTags
当前位置:  开发笔记 > 编程语言 > 正文

解析JSON格式文本并处理数据

本文介绍如何使用阿里云的fastjson库解析包含时间戳、IP地址和参数等信息的JSON格式文本,并进行数据处理和保存。
在处理日志文件时,我们经常遇到包含复杂嵌套结构的JSON格式文本。这些文本通常包括时间戳、IP地址、设备信息和其他参数。为了有效地解析和处理这类数据,我们可以使用阿里云提供的fastjson库。

### 示例JSON文本
以下是一个典型的日志条目示例:
```json
2017-02-15T18:00:00.001Z-{
"visitTime": "1487152800001",
"ip": "xx.xxx.xxx.xxx",
"params": "{\"encode\":\"utf-8\",\"xxx\":\"0.0\",\"xxxx\":\"6869679\",\"resType\":\"json\",\"ak\":\"xxxxxxxxxxxxxxxxxxxxxxx\",\"xxx\":\"98\",\"uri\":\"/xx/xxx\",\"out_coord_type\":\"xxx\",\"coord_type\":\"xxxx\",\"domain\":null,\"location\":\"xxxx,xxxxx\",\"enc\":\"utf-8\",\"pois\":\"1\"}",
"device": "xxxxxx",
"sid": "xxxx"
}
```

### 代码实现
下面的代码展示了如何使用fastjson库解析上述JSON格式的日志文件,并提取关键信息进行处理和保存。

```java
package com.entity;

import java.io.BufferedReader;
import java.io.BufferedWriter;
import java.io.File;
import java.io.FileReader;
import java.io.FileWriter;
import java.io.IOException;
import java.math.BigDecimal;
import java.text.DecimalFormat;

import com.alibaba.fastjson.JSON;
import com.alibaba.fastjson.JSONObject;

public class ReadAndWrite {
public static void main(String[] args) {
excute("F:\\xxxx.log");
}

public static void excute(String path) {
File file = new File(path);
BufferedReader reader = null;
try {
reader = new BufferedReader(new FileReader(file));
String tempString;
while ((tempString = reader.readLine()) != null) {
JSONObject parseObject = JSON.parseObject(tempString);
String params = parseObject.getString("params");
JSONObject parseObject2 = JSON.parseObject(params);

// 获取车辆ID
String carID;
if (parseObject2.get("vhcid") == null) {
String ip = parseObject.getString("ip");
String carID1 = MD5Utils.md5(ip).substring(0, 5);
int parseInt = Integer.parseInt(carID1, 16) + 10000000;
carID = String.valueOf(parseInt);
} else {
carID = parseObject2.getString("vhcid");
}

// 获取定位时间
long visitTime = Long.parseLong(parseObject.getString("visitTime")) / 1000;
String UTC = String.valueOf(visitTime);

// 获取经纬度
String du;
if (parseObject2.containsKey("location")) {
String location = parseObject2.getString("location");
String[] split = location.split(",");
BigDecimal bd = new BigDecimal(split[0]).multiply(BigDecimal.TEN.pow(5));
BigDecimal bd1 = new BigDecimal(split[1]).multiply(BigDecimal.TEN.pow(5));
DecimalFormat dcmFmt = new DecimalFormat("0.0");
du = dcmFmt.format(bd).substring(0, dcmFmt.format(bd).length() - 2) + "," + dcmFmt.format(bd1).substring(0, dcmFmt.format(bd1).length() - 2);
} else if (parseObject2.containsKey("coords")) {
String coords = parseObject2.getString("coords");
String[] split = coords.split(",");
BigDecimal bd = new BigDecimal(split[0]).multiply(BigDecimal.TEN.pow(5));
BigDecimal bd1 = new BigDecimal(split[1]).multiply(BigDecimal.TEN.pow(5));
DecimalFormat dcmFmt = new DecimalFormat("0.0");
du = dcmFmt.format(bd).substring(0, dcmFmt.format(bd).length() - 2) + "," + dcmFmt.format(bd1).substring(0, dcmFmt.format(bd1).length() - 2);
} else {
du = "00000000,00000000";
}

// 获取速度
String speed = parseObject2.containsKey("speed") ? String.valueOf((int) Double.parseDouble(parseObject2.getString("speed"))) : "0";

// 获取方向
String head = parseObject2.containsKey("direction") ? String.valueOf((int) Double.parseDouble(parseObject2.getString("direction"))) : (parseObject2.containsKey("dir") ? String.valueOf((int) Double.parseDouble(parseObject2.getString("dir"))) : "0");

// 设置状态和接收时间
String status = "1";
String time = UTC;

// 拼接字符串并写入文件
if (!du.equals("00000000,00000000")) {
StringBuilder sb = new StringBuilder();
sb.append(carID).append(",").append(UTC).append(",").append(du).append(",").append(speed).append(",").append(head).append(",").append(status).append(",").append(time);
String message = sb.toString();
try (BufferedWriter bw = new BufferedWriter(new FileWriter("F:\\mspVisitLog20170223.txt", true))) {
bw.write(message + "\r\n");
}
}
}
} catch (IOException e) {
e.printStackTrace();
} finally {
if (reader != null) {
try {
reader.close();
} catch (IOException e1) {
e1.printStackTrace();
}
}
}
}
}
```

此代码片段实现了对日志文件中每一行JSON数据的解析,提取了必要的字段(如时间戳、IP地址、经纬度等),并对这些数据进行了进一步处理,最终将处理后的结果写入新的文件中。
推荐阅读
  • andr ... [详细]
  • 深入理解Cookie与Session会话管理
    本文详细介绍了如何通过HTTP响应和请求处理浏览器的Cookie信息,以及如何创建、设置和管理Cookie。同时探讨了会话跟踪技术中的Session机制,解释其原理及应用场景。 ... [详细]
  • 本文介绍了一款用于自动化部署 Linux 服务的 Bash 脚本。该脚本不仅涵盖了基本的文件复制和目录创建,还处理了系统服务的配置和启动,确保在多种 Linux 发行版上都能顺利运行。 ... [详细]
  • 本文介绍如何通过Windows批处理脚本定期检查并重启Java应用程序,确保其持续稳定运行。脚本每30分钟检查一次,并在需要时重启Java程序。同时,它会将任务结果发送到Redis。 ... [详细]
  • 本文介绍如何使用 NSTimer 实现倒计时功能,详细讲解了初始化方法、参数配置以及具体实现步骤。通过示例代码展示如何创建和管理定时器,确保在指定时间间隔内执行特定任务。 ... [详细]
  • 本文介绍了在Windows环境下使用pydoc工具的方法,并详细解释了如何通过命令行和浏览器查看Python内置函数的文档。此外,还提供了关于raw_input和open函数的具体用法和功能说明。 ... [详细]
  • 本文介绍如何使用Python进行文本处理,包括分词和生成词云图。通过整合多个文本文件、去除停用词并生成词云图,展示文本数据的可视化分析方法。 ... [详细]
  • 本文将介绍如何编写一些有趣的VBScript脚本,这些脚本可以在朋友之间进行无害的恶作剧。通过简单的代码示例,帮助您了解VBScript的基本语法和功能。 ... [详细]
  • Linux 系统启动故障排除指南:MBR 和 GRUB 问题
    本文详细介绍了 Linux 系统启动过程中常见的 MBR 扇区和 GRUB 引导程序故障及其解决方案,涵盖从备份、模拟故障到恢复的具体步骤。 ... [详细]
  • 1:有如下一段程序:packagea.b.c;publicclassTest{privatestaticinti0;publicintgetNext(){return ... [详细]
  • MySQL中枚举类型的所有可能值获取方法
    本文介绍了一种在MySQL数据库中查询枚举(ENUM)类型字段所有可能取值的方法,帮助开发者更好地理解和利用这一数据类型。 ... [详细]
  • RecyclerView初步学习(一)
    RecyclerView初步学习(一)ReCyclerView提供了一种插件式的编程模式,除了提供ViewHolder缓存模式,还可以自定义动画,分割符,布局样式,相比于传统的ListVi ... [详细]
  • 高效解决应用崩溃问题!友盟新版错误分析工具全面升级
    友盟推出的最新版错误分析工具,专为移动开发者设计,提供强大的Crash收集与分析功能。该工具能够实时监控App运行状态,快速发现并修复错误,显著提升应用的稳定性和用户体验。 ... [详细]
  • 以下实例展示了locals( ... [详细]
  • VPX611是北京青翼科技推出的一款采用6U VPX架构的高性能数据存储板。该板卡搭载两片Xilinx Kintex-7系列FPGA作为主控单元,内置RAID控制器,支持多达8个mSATA盘,最大存储容量可达8TB,持续写入带宽高达3.2GB/s。 ... [详细]
author-avatar
mobiledu2502884963
这个家伙很懒,什么也没留下!
PHP1.CN | 中国最专业的PHP中文社区 | DevBox开发工具箱 | json解析格式化 |PHP资讯 | PHP教程 | 数据库技术 | 服务器技术 | 前端开发技术 | PHP框架 | 开发工具 | 在线工具
Copyright © 1998 - 2020 PHP1.CN. All Rights Reserved | 京公网安备 11010802041100号 | 京ICP备19059560号-4 | PHP1.CN 第一PHP社区 版权所有