热门标签 | HotTags
当前位置:  开发笔记 > 编程语言 > 正文

跟踪系统的NoSQL存储-NoSQLstorageforatracingsystem

Ihaveausecasewhichincludesasystemthatcantracedata,toexplainthecasethesystemhasto

I have a use case which includes a system that can trace data, to explain the case the system has to intercept each request and check if that request is already exist to do some map/reduce on the body, it suppose to be real time. I'm sorry that I can't elaborate more due to the sensitivity of the system I'm working on.

我有一个用例,其中包括一个可以跟踪数据的系统,解释系统必须拦截每个请求的情况,并检查该请求是否已经存在,以便对身体进行一些map / reduce,它假设是实时的。很抱歉,由于我正在研究的系统的灵敏度,我无法详细说明。

I'm focusing mainly on NoSql key/value store, so I'm thinking of Rocksdb / Riak. My question is does it fit for this use case or there is a better alternative?

我主要关注NoSql键/值存储,所以我在考虑Rocksdb / Riak。我的问题是它适合这个用例还是有更好的选择?

2 个解决方案

#1


0  

First lets say that Riak and Rocksdb both are key/value storage but Riak is used as a distributed and highly available database but Rocksdb is an embedded database solution. Also neither of them is suitable for doing map reduce in real-time.

首先让我们说Riak和Rocksdb都是键/值存储,但Riak用作分布式和高可用性数据库,但Rocksdb是一个嵌入式数据库解决方案。它们也都不适合实时地减少地图。

In the Hadoop ecosystem there are solutions which can be used for doing map reduce in real-time:

在Hadoop生态系统中,有一些解决方案可用于实时地减少地图:

  • Apache Storm
  • Apache Storm
  • Apache Spark
  • Apache Spark

#2


0  

Riak with bitcask can be very fast in concepts of IO. If you want to speed up the process you can add some cache layer (redis for example), before you go with your key to riak.

带有bitcask的Riak在IO的概念上可以非常快。如果你想加快这个过程,可以先添加一些缓存层(例如redis),然后再使用你的密钥进行riak。

But do you want to check either the value exists or not, and then, if not exists perform some map/reduce task by your site or it should be part of the key value store solution?

但是,您是否要检查值是否存在,然后,如果不存在,请执行您的站点执行某些map / reduce任务,或者它应该是键值存储解决方案的一部分?


推荐阅读
  • 本文探讨了 Kafka 集群的高效部署与优化策略。首先介绍了 Kafka 的下载与安装步骤,包括从官方网站获取最新版本的压缩包并进行解压。随后详细讨论了集群配置的最佳实践,涵盖节点选择、网络优化和性能调优等方面,旨在提升系统的稳定性和处理能力。此外,还提供了常见的故障排查方法和监控方案,帮助运维人员更好地管理和维护 Kafka 集群。 ... [详细]
  • 本文详细介绍了在 CentOS 7 系统中配置 fstab 文件以实现开机自动挂载 NFS 共享目录的方法,并解决了常见的配置失败问题。 ... [详细]
  • Ihavetwomethodsofgeneratingmdistinctrandomnumbersintherange[0..n-1]我有两种方法在范围[0.n-1]中生 ... [详细]
  • 本文详细解析了 Android 系统启动过程中的核心文件 `init.c`,探讨了其在系统初始化阶段的关键作用。通过对 `init.c` 的源代码进行深入分析,揭示了其如何管理进程、解析配置文件以及执行系统启动脚本。此外,文章还介绍了 `init` 进程的生命周期及其与内核的交互方式,为开发者提供了深入了解 Android 启动机制的宝贵资料。 ... [详细]
  • 本文详细探讨了使用Python3编写爬虫时如何应对网站的反爬虫机制,通过实例讲解了如何模拟浏览器访问,帮助读者更好地理解和应用相关技术。 ... [详细]
  • Cookie学习小结
    Cookie学习小结 ... [详细]
  • com.sun.javadoc.PackageDoc.exceptions()方法的使用及代码示例 ... [详细]
  • 单片微机原理P3:80C51外部拓展系统
      外部拓展其实是个相对来说很好玩的章节,可以真正开始用单片机写程序了,比较重要的是外部存储器拓展,81C55拓展,矩阵键盘,动态显示,DAC和ADC。0.IO接口电路概念与存 ... [详细]
  • 本文详细介绍了 PHP 中对象的生命周期、内存管理和魔术方法的使用,包括对象的自动销毁、析构函数的作用以及各种魔术方法的具体应用场景。 ... [详细]
  • 如何使用 `org.opencb.opencga.core.results.VariantQueryResult.getSource()` 方法及其代码示例详解 ... [详细]
  • 在Android应用开发中,实现与MySQL数据库的连接是一项重要的技术任务。本文详细介绍了Android连接MySQL数据库的操作流程和技术要点。首先,Android平台提供了SQLiteOpenHelper类作为数据库辅助工具,用于创建或打开数据库。开发者可以通过继承并扩展该类,实现对数据库的初始化和版本管理。此外,文章还探讨了使用第三方库如Retrofit或Volley进行网络请求,以及如何通过JSON格式交换数据,确保与MySQL服务器的高效通信。 ... [详细]
  • 在使用SSH框架进行项目开发时,经常会遇到一些常见的问题。例如,在Spring配置文件中配置AOP事务声明后,进行单元测试时可能会出现“No Hibernate Session bound to thread”的错误。本文将详细探讨这一问题的原因,并提供有效的解决方案,帮助开发者顺利解决此类问题。 ... [详细]
  • 2012年9月12日优酷土豆校园招聘笔试题目解析与备考指南
    2012年9月12日,优酷土豆校园招聘笔试题目解析与备考指南。在选择题部分,有一道题目涉及中国人的血型分布情况,具体为A型30%、B型20%、O型40%、AB型10%。若需确保在随机选取的样本中,至少有一人为B型血的概率不低于90%,则需要选取的最少人数是多少?该问题不仅考察了概率统计的基本知识,还要求考生具备一定的逻辑推理能力。 ... [详细]
  • 第二章:Kafka基础入门与核心概念解析
    本章节主要介绍了Kafka的基本概念及其核心特性。Kafka是一种分布式消息发布和订阅系统,以其卓越的性能和高吞吐量而著称。最初,Kafka被设计用于LinkedIn的活动流和运营数据处理,旨在高效地管理和传输大规模的数据流。这些数据主要包括用户活动记录、系统日志和其他实时信息。通过深入解析Kafka的设计原理和应用场景,读者将能够更好地理解其在现代大数据架构中的重要地位。 ... [详细]
  • 在Android 4.4系统中,通过使用 `Intent` 对象并设置动作 `ACTION_GET_CONTENT` 或 `ACTION_OPEN_DOCUMENT`,可以从相册中选择图片并获取其路径。具体实现时,需要为 `Intent` 添加相应的类别,并处理返回的 Uri 以提取图片的文件路径。此方法适用于需要从用户相册中选择图片的应用场景,能够确保兼容性和用户体验。 ... [详细]
author-avatar
Jessie-GWU_552
这个家伙很懒,什么也没留下!
PHP1.CN | 中国最专业的PHP中文社区 | DevBox开发工具箱 | json解析格式化 |PHP资讯 | PHP教程 | 数据库技术 | 服务器技术 | 前端开发技术 | PHP框架 | 开发工具 | 在线工具
Copyright © 1998 - 2020 PHP1.CN. All Rights Reserved | 京公网安备 11010802041100号 | 京ICP备19059560号-4 | PHP1.CN 第一PHP社区 版权所有