数据库 - CopyLian's Blog - 关注互联网、技术、生活、创业的心情日迹！

技术饭 PHP的MongoDB\Driver\Manager实现对mongodb的操作

MongoDB是开发人员数据平台，提供必要的服务和工具，以快速、高性能和大规模地构建用户需求的分布式应用程序。MongoDB是一个基于分布式文件存储的数据库。由C++语言编写。旨在为WEB应用提供可扩展的高性能数据存储解决方案。MongoDB是一个介于关系数据库和非关系数据库之间的产品，是非关系数据库当中功能最丰富，最像关系数据库的。它支持的数据结构非常松散，是类似json的bson格式，因此可以存储比较复杂的数据类型。Mongo最大的特点是它支持的查询语言非常强大，其语法有点类似于面向对象的查询语言，几乎可以实现类似关系数据库单表查询的绝大部分功能，而且还支持对数据建立索引。

阅读全文 » 329天前
2023年06月01日

技术饭 redis队列详解

现如今的互联网应用大都是采用分布式系统架构设计的，所以消息队列已经逐渐成为企业应用系统内部通信的核心手段，它具有低耦合、可靠投递、广播、流量控制、最终一致性等一系列功能。当前使用较多的消息队列有 RabbitMQ、RocketMQ、ActiveMQ、Kafka、ZeroMQ、MetaMQ 等，而部分数据库如 Redis、MySQL 以及 phxsql ，如果硬搞的话，其实也可实现消息队列的功能。可能有人觉得，各种开源的 MQ 已经足够使用了，为什么需要用 Redis 实现 MQ 呢？有些简单的业务场景，可能不需要重量级的 MQ 组件（相比 Redis 来说，Kafka 和 RabbitMQ 都算是重量级的消息队列）。

阅读全文 » 359天前
2023年05月01日

技术饭 PHP中ElasticSearch的简单使用

Elasticsearch 是一个分布式、高扩展、高实时的搜索与数据分析引擎。它能很方便的使大量数据具有搜索、分析和探索的能力。充分利用Elasticsearch的水平伸缩性，能使数据在生产环境变得更有价值。Elasticsearch 的实现原理主要分为以下几个步骤，首先用户将数据提交到Elasticsearch 数据库中，再通过分词控制器去将对应的语句分词，将其权重和分词结果一并存入数据，当用户搜索数据时候，再根据权重将结果排名，打分，再将返回结果呈现给用户。

阅读全文 » 784天前
2022年03月03日

技术饭 mysql替换（replace）字符串字段的某些字符串、正则替换

mysql替换（replace）字符串字段的某些字符串、正则替换，由于图片字段上传到腾讯云cos之后，缩略图带了裁剪参数，存入数据库之后，参数也被存在了数据库中，导致图片的显示不全，现在需要把图片处理参数删除，也就是图片url问号后面的参数一并删除；刚开始想法是直接用mysql里面的regexp_replace函数对敏感字段进行处理。后来发现mysql8.0才支持regexp_replace()。mysql5.7里只有正则匹配的函数。最后还是用mysql本身提供的函数进行处理。

阅读全文 » 784天前
2022年03月03日

技术饭 centos8 安装 mysql5.7（更新数据库）

centos8 安装 mysql5.7（更新数据库），centos8下默认的yum源是mysql8，如果想用mysql5.7那该如何安装呢？其实也蛮简单的，mysql官方也给出了操作方法，直接安装步骤执行就可以了，但是有一点需要注意的是：过程中可能会报Mariadb错误，原因是因为yum自动默认了Mariadb，这需要先禁用卸载Mariadb之后才能继续安装mysql5.7版本。

阅读全文 » 991天前
2021年08月08日

技术饭 更改MySQL数据库的编码为utf8mb4，还是无法解决表情符号不能保存的问题

更改MySQL数据库的编码为utf8mb4，还是无法解决表情符号不能保存的问题，这几天在做公众号授权，每次写入用户昵称数据的时候一直报错，我就奇怪了，明明数据库、字符集都改成了utf8mb4，为什么还是写入不了数据呢，查看了测试机（mysql5.7.24）的my.cnf 文件没有配置设置编码却没有问题，而正式机（mysql5.7.32）做了字符集编码的配置却出现了异常，真实奇葩~~~

阅读全文 » 1216天前
2020年12月26日

技术饭 centos8重新安装MySQL，从高版本降到低版本后疯狂报错

centos8重新安装MySQL，从高版本降到低版本后疯狂报错。原来服务器centos8是默认yum install mysql的，mysql的版本是8.0.21，但是原始项目的数据库过度过去之后，数据库报错了，说是8.0.17版本之后int、tinyint类的字段长度被废弃不再显示了：mysql8.0 tinyint字段长度修改时无效，所以就想把mysql版本降到5.7.32版本，本来是先yum remove mysql，因为没有删除遗留的mysql文件、目录导致了安装5.7.32版本一直报错。

阅读全文 » 1261天前
2020年11月11日

技术饭 MySQL 批量修改数据表编码及字符集

经常使用SQLyog导出导入数据库时，不懂为什么经常性出现编码错误字符集被设置成了默认，奇怪的很，可能是软件版本问题，当需要修改数据库编码和字符集时，通常需要对其下属的所有表及表中所有字段进行修改。以下备注批量修改方案（以修改为 utf8mb4_general_ci为例，注意将 db_name 换为真实的数据库名）。

阅读全文 » 1261天前
2020年11月10日

技术饭 POST参数超过1000后，$_POST中1000以后的参数丢失，但是php5.6 max_input_vars 修改无反应？

之前做了图片文件上传到阿里云oss存储中，阿里本身的传输没有问题，但是在当保存到自己数据库的时候就报错了，第一次报错是id不存在，本来数据表就是一条记录，更新的主键ID竟然不存在，查了下js传过过来的formdata参数正常，但是$_POST就只仅仅取到了一部分数据，剩余的数据丢失了，想想应该是php限制的问题，最终确定是参数： max_input_vars 默认限制了1000，本来是改成了5000，但是测了还是没效果，查了phpinfo()发现：php-fpm重启之后 max_input_vars 的值并没有改变，多方查证发现服务器的php配置原来是外包公司配置的，外包公司把配置文件改到了 php-fpm.conf 文件里面，所以原始的php.ini中的参数就失效了，无论设置成什么都会失效。

阅读全文 » 1318天前
2020年09月14日

技术饭 获取微信js-sdk网页授权的地理位置

获取微信js-sdk网页授权的地理位置，通过微信浏览器打开页面时，有时会提示要获取地理位置信息，点击同意后，自己的地理位置信息就会相应的显示在页面，同时通过数据库的查询，以实现以地理位置分类的逻辑业务。

阅读全文 » 1346天前
2020年08月17日

技术饭 php解析ip地址的免费纯真IP数据库

之前使用的tp3的UTFWry.dat作为ip解析，但是感觉这个类有点旧，还比较难用，数据不多，如果需要其他信息还需要重新修改IpLocation.php类，淘宝腾讯提供的免费第三方获取ip的方式不太稳定，所以找了找还是基于qqwry.dat的ip库相对合适。

阅读全文 » 1347天前
2020年08月16日

技术饭 think\cache\Driver::unserialize()经常报Error at offset... bytes这样的错误

think\cache\Driver::unserialize()经常报Error at offset... bytes这样的错误，这几天做了抢红包的活动，请求高并发之后，程序出现了报错，数据无法写入数据库，查询调试发现报的错误是：unserialize(): Error at offset 284217 of 284296 bytes，后来是清除了缓存才解决了问题，可是问题是总不能一直清除缓存吧！！！

阅读全文 » 1349天前
2020年08月15日

技术饭 php使用array_slice()函数进行数组分页

今天用到一个函数，非常好用，分享给大家，array_slice() -从数组中取出一段也就是说用这个函数可以和sql语句一样实现分页，原理是将查询出的数组，取出从指定下标开始到指定长度的数组，我们的数据未必都是存储在数据库中，很多时候是用数组来组织的。所以获取数组数据，进行分页是比较常见的编程要求，array_slice(原数组，开始下标，要取几条)，这里用到三个参数（如果不写第三个参数返回直到数组末端的所有元素）

阅读全文 » 1473天前
2020年04月13日

技术饭 thinkphp5.1的json数据写入、查询

正常一篇文章属于一个分类，所以是单选，现在需要将一篇文章对应多个分类，这时候就需要将分类的单选改成了多选，那做法就有两种，1、将文章表的catid字段改成json格式，如：{"value":"5","value":"6"}，2、删除文章表的catid字段，新建一个关联catid的表。

阅读全文 » 1514天前
2020年03月03日

吃瓜群众 微盟被删库，听说是程序员老婆与公司高管有纠葛？？？

2 月 25 日消息，24 日晚间，微盟官网发出公告称，微盟的业务系统数据库（包括主备）遭遇其公司运维人员的删除，目前正在紧急修复，服务恢复预计还需要 24-48 小时。靠给微信公众账号提供营销推广服务发家，做到上市的微盟怎么也没想到，2020年给自己上的第一课是公司核心运维人员的“删库跑路”。

阅读全文 » 1519天前
2020年02月26日

技术饭 MySQL的InnoDB引擎数据库经常出现自动关闭现象，Cannot allocate memory for the buffer pool

MySQL的InnoDB引擎数据库经常出现自动关闭现象，Cannot allocate memory for the buffer pool，最近网站经常时不时地出现访问不了的状况，一直没在意，今天又一down机了，索性就查看了下MySQL的日志。

阅读全文 » 1653天前
2019年10月16日

技术饭 ThinkPHP3.2框架中添加（add）或更新（save）时过滤某些字段的问题

ThinkPHP3.2框架中添加（add）或更新（save）时过滤某些字段的问题，在已经建好的数据表结构中新增或修改字段后，在TP框架中执行增加、修改操作时出现过滤掉该字段，而打印的插入或更新数据会显示该字段，打印执行的sql语句不会出现该字段，这时把TP框架中的runtime文件夹删掉即可，原因是runtime文件夹中有数据库的缓存会自动过滤掉该字段

阅读全文 » 1870天前
2019年03月13日

技术饭 mysql存储表情：General error: 1366 Incorrect string value: '\xF0\x9F\x98\x8A' for column

今天向数据库插入一条数据时，有条数据的某个字段包含\xF0\x9F\x98\x8A字符，导致MYSQL数据库出现以下错误：General error: 1366 Incorrect string value: '\xF0\x9F\x98\x8A' for column ...

阅读全文 » 1943天前
2018年12月29日

技术饭 wnmp3.1.0安装之后数据库连接报错：port: 3306 source distribution，访问localhost、127.0.0.1报错：10060: A connection attempt failed because...

wnmp3.1.0安装之后数据库连接报错：port: 3306 source distribution，访问localhost、127.0.0.1报错：10060: A connection attempt failed because the connected party did not properly respond after a period of time, or established connection failed because connected host has failed to respond

阅读全文 » 1956天前
2018年12月17日

技术饭 Linux下如何实现Mysql数据库每天自动备份定时备份

备份是容灾的基础，是指为防止系统出现操作失误或系统故障导致数据丢失，而将全部或部分数据集合从应用主机的硬盘或阵列复制到其它的存储介质的过程。而对于一些网站、系统来说，数据库就是一切，所以做好数据库的备份是至关重要的！

阅读全文 » 2000天前
2018年11月03日

技术饭 PHP面试的知识点

PHP面试之一：PHP基础知识点，PHP面试之二：高并发与大数据，PHP面试之三：MySQL数据库，PHP面试之三：MySQL数据库

阅读全文 » 2024天前
2018年10月10日

技术饭 mysql触发器trigger 实例详解

触发器是由事件来触发某个操作，这些事件包括insert语句、update语句和delete语句。当数据库系统执行这些事件时，会激活触发器执行相应操作。MySQL从5.0.2开始支持触发器。使用触发器可以保证某些操作之间的一致性。

阅读全文 » 2029天前
2018年10月05日

技术饭 mysql数据库分表及实现

项目开发中，我们的数据库数据越来越大，随之而来的是单个表中数据太多。以至于查询书读变慢，而且由于表的锁机制导致应用操作也搜到严重影响，出现了数据库性能瓶颈。当出现这种情况时，我们可以考虑分表，即将单个数据库表进行拆分，拆分成多个数据表，然后用户访问的时候，根据一定的算法，让用户访问不同的表，这样数据分散到多个数据表中，减少了单个数据表的访问压力。提升了数据库访问性能。

阅读全文 » 2030天前
2018年10月04日

技术饭 php7+mysql8下出现网页无法访问问题解决方案

php7+mysql8下出现网页无法访问问题解决方案，最近因为剁手买了Centos7，在上面搭建Ningx1.14.0+PHP7.2+Mysql8.0环境。数据库mysql从5.7跳到8，性能快了一倍，lnmp基本都弄好了，但是到用php连接Mysql这一步出了问题，一直无法加载网页，可是使用客户端、shell命令都可以进入mysql，多方查询才找到答案！

阅读全文 » 2049天前
2018年09月15日

技术饭 【转】MySQL性能优化的最佳21条经验

今天，数据库的操作越来越成为整个应用的性能瓶颈了，这点对于Web应用尤其明显。关于数据库的性能，这并不只是DBA才需要担心的事，而这更是我们程序员需要去关注的事情。当我们去设计数据库表结构，对操作数据库时（尤其是查表时的SQL语句），我们都需要注意数据操作的性能。这里，我们不会讲过多的SQL语句的优化，而只是针对MySQL这一Web应用最多的数据库。希望下面的这些优化技巧对你有用。

阅读全文 » 2191天前
2018年04月26日

技术饭 MySQL基础整理

MySQL基础整理，Mysql是最流行的关系型数据库管理系统，在WEB应用方面MySQL是最好的RDBMS(Relational Database Management System：关系数据库管理系统)应用软件之一。

阅读全文 » 2193天前
2018年04月24日

技术饭  SQLyog Enterprise常用快捷键

SQLyog Enterprise常用快捷键，作为比较早期的mysql数据库管理工具，还是蛮好使用的，但是要习惯使用方式才会好用，现在一直在用 SQLyog Enterprise，但是很多快捷键没有使用好，今天整理一番，供学习参考交流。

阅读全文 » 2417天前
2017年09月12日

技术饭 php7环境下带mysql_开头的php方法都不能使用了

php7环境下带mysql_开头的php方法都不能使用了，奇怪了之前后台备份数据库功能都是可以的，怎么升级成php7之后报了404错误，我靠不对劲啊，还是排查下代码，调试之后发现是mysql_get_client_info函数undefined，竟然说mysql_get_client_info函数不存在......

阅读全文 » 2447天前
2017年08月13日

技术饭 ThinkPHP使用数据库读写分离时，开启事务时报错：There is no active transaction

ThinkPHP使用数据库读写分离时，开启事务时报错：There is no active transaction，刚开始以为是数据表引擎不对造成的，因为有几张表的引擎是 MyISAM，后来调整过来了，改为 InnoDB，还是报错。应该是TP 底层连数据库时，切换数据库连接时出了点问题。

阅读全文 » 2530天前
2017年05月22日

技术饭 Redis的PHP操作手册

Redis的PHP操作手册，REmote DIctionary Server(Redis) 是一个由Salvatore Sanfilippo写的key-value存储系统。 Redis是一个开源的使用ANSI C语言编写、遵守BSD协议、支持网络、可基于内存亦可持久化的日志型、Key-Value数据库，并提供多种语言的API。它通常被称为数据结构服务器，因为值（value）可以是字符串(String), 哈希(Map), 列表(list), 集合(sets) 和有序集合(sorted sets)等类型。

阅读全文 » 2540天前
2017年05月12日

技术饭 php操作redis常用方法代码示例

php操作redis常用方法代码示例，phpredis是php的一个扩展，效率是相当高有链表排序功能，对创建内存级的模块业务关系，Redis 是一个开源（BSD许可）的，内存中的数据结构存储系统，它可以用作数据库、缓存和消息中间件。它支持多种类型的数据结构，如字符串（strings），散列（hashes），列表（lists），集合（sets），有序集合（sorted sets）与范围查询， bitmaps， hyperloglogs 和地理空间（geospatial）索引半径查询。 Redis 内置了复制（replication），LUA脚本（Lua scripting）， LRU驱动事件（LRU eviction），事务（transactions）和不同级别的磁盘持久化（persistence），并通过 Redis哨兵（Sentinel）和自动分区（Cluster）提供高可用性（high availability）。