Other articles


  1. Redis学习笔记

    Redis 介绍

    • Redis 是一种“key-value”的存储,通常被当做一个NoSQL数据库
    • 原子操作:INCR

    基本操作

    • SET 负责永久存储一个数值在指定的键上;SETNX = set if key not exit:

    shell SET key some-value

    • GET 负责读取一个键对应的值:

    shell GET key

    • DEL 操作删除一个key;INCR 自增
    • EXPIRE 定时过期:

    shell EXPIRE key second

    TTL 过期前的剩余时间,返回值是-2则表示key已不存在,-1表示永远不会过期。如果 SET 了key,它的 TTL 会被重置:

    shell …

    read more
  2. Programming Hive 笔记 (I)

    I. Hive介绍

    • Hadoop中,有一个计算系统MapReduce,将计算任务分解到集群中的服务器上计算,这样可以更有效率的处理大数据的计算;计算系统下面有一个分布式文件系统(HDFS)。那么问题来了:

      怎样把已有的建立在关系型数据库上面的、使用SQL的数据结构,迁移到Hadoop上面呢?

    答案:

    HIVE!

    • Hive使用大家都熟悉的类SQL语言从Hadoop集群中查询数据,让使用者把注意力都放在查询上,而不是其他方面
    • 适合使用Hive的场景:数据仓储应用中——相对静态的数据被分析,不要求快速回应,数据没有频繁的变化
    • Hive不是完整的数据库。Hive的功能被Hadoop和HDFS的限制所限制。
    • Hive不提供一条纪录水平上的update、insert、delete。可以通过查询生成新的表,或者导出查询结果到文件
    • 因为Hadoop是面向批处理的系统,Hive查询延迟更高(因为MapReduce的开销),再小的数据集,Hive查询相比传统DB也要花费更长的时间
    • Hive不提供事务
    read more

links

social