在各行各业纷纷结合自身需求，加快自主改造和研发脚步的当下，涌现出许多值得学习借鉴的优秀项目。本期将详述光大银行首个独立研发的基础软件Pharos，如何从HBase二级索引出发，提升多条件复杂查询的性能，拓展HBase的数据使用模式，应对海量数据低延时复杂查询。自研背景可插拔的HBase索引组件NoSQL兴起无疑是大数据时代的标志性事件，创新者们不断打破关系型数据库“一种存储模式解决所有问题”的思路...
前言继上文发表之后，结合评论意见并亲自验证最终发现是编码的问题，但是对于字符编码还是有点不解，于是乎，有了本文，我们来学习字符编码，在学习的过程中，我发现对于MySQL中JSON类型的编码导致数据中文出现乱码还有可深挖之处，接下来我们来分析一下，若有错误之处，还请批评指出。字符编码评论中指出任何不在基本多文本平面的Unicode字符，都无法使用MySQL的utf8字符集存储，包括Emoji 表情(...
由于开发很多视图指定了某个用户名，故需修改数据库用户名srmpro为srm。以下为操作过程。1. 停止应用防止修改用户名密码后应用一直在发起错误连接，可事先查询哪个IP在连接数据库，然后断开对应连接即可(这里需用到触发器记录客户端IP)select username,machine,terminal,program,client_info,logon_time from&nbs...
在项目中利用Dapper将JSON数据存储到MySQL数据库，结果发现JSON数据中的中文乱码，特此记录，希望对存储JSON的童鞋能有所帮助，文中若有错误之处，还望批评指正。Dapper获取JSON数据乱码（MySQL）为了引出最终问题出在什么地方，我们重头开始进行讲解，首先我们给出如下测试实体以及在数据库中的表，如下： public cla...
MySQL 事务本文所说的 MySQL 事务都是指在 InnoDB 引擎下，MyISAM 引擎是不支持事务的。数据库事务指的是一组数据操作，事务内的操作要么就是全部成功，要么就是全部失败，什么都不做，其实不是没做，是可能做了一部分但是只要有一步失败，就要回滚所有操作，有点一不做二不休的意思。假设一个网购付款的操作，用户付款后要涉及到订单状态更新、扣库存以及其他一系列动作，这就是一个事务，如果一切正...
概述介绍一下一般数据库服务器应该做的一些优化，这里不涉及数据库层面，只考虑服务器监控和优化方面。1、系统层面监控主要关注以下三点。1.1、cpu方面：vmstat、sar 、top+P、htop、nmon、mpstat1.2、内存：free 、ps -aux 、top+M1.3、IO 设备(磁盘、网络)：iostat 、 ss 、 netstat 、 iptraf、iftop、lsof补充：vms...
分布式架构可能是近几年最火的话题。从集中式、SOA到分布式架构，本文回顾了这些年金融行业经历的架构演变;结合当下一些较典型的分布式数据库的实现原理，分析了分布式数据库的三个发展阶段。分布式数据库的应用解决了传统数据库性能扩展问题的同时，也给运维人员带来了挑战。那么，分布式数据库的管理究竟多了些什么?如何管理好?未来数据库和数据库运维又将去往何方?读过本文，你可以找到答案。一、金融行业这些年经历了怎...
企业正被各种来源的实时数据所淹没，包括来自网络和移动应用程序、物联网、市场数据和交易等。从理论上讲，企业应该可以利用这些大量信息改善客户体验、节省资金和创造利润。这里的挑战是弄清楚如何利用这些数据流，以及应使用哪些分析类型。有效的实时分析架构可以帮助业务经理和数据科学家快速测试新想法，以识别和扩展最佳用例。传统的分析方法依赖于将数据结构化，并存储在数据库中，这些数据库需针对特定查询类别进行优化。实...
一、前言为了讲清楚这个问题，阿粉先带大家了解一下什么是索引。我记得刚刚学习数据库的时候，老师喜欢用书本的目录来类比数据库的索引，并告诉我们索引能够像目录一样，让我们更快地找到想要找到的数据。如果是第一次接触索引，这个比喻能够让我们有一个直观的印象。但是当深入去学习索引的时候，我们不能继续持有索引即目录的思想，我们要跳出来去思考索引的本质是什么。二、索引的本质在没有索引的情况下，我们查找数据只能按照...
最近很多小伙伴都参与了面试更换了工作，校招也已经开始了。最近面试了几个实习生，感觉基础能力都不大行，数据库在程序员的面试中占有举足轻重的一个作用。今天我们来讲一讲数据库的索引是什么?索引，就跟我们的书本的目录一样，如果一本书没有目录，那么你要找某一个知识点，那自然是相当费劲的。数据库的索引就是扮演这样的角色，索引会告诉你对应的数据存放的磁盘地址，就好比目录上面的页数。那么数据库的“目录”究竟长什么...
