hhhzua 发布的文章

Laravel 怎么查看执行的Sql语句

作者: hhhzua
时间: 2019-12-30
分类: Laravel,PHP,Mysql
评论

1、如果是使用Eloquent ORM操作数据库的话，在sql查询时可以调用toSql()方法来获取sql：

    App\User::where('name','like','%hezehua%')->toSql();

2、如果是执行原生Sql查询，则不能使用toSql()方法了，而是开启查询日志：

    DB::enableQueryLog();
    DB::sselect("select * from users limit 10");
    $log = DB::getQueryLog();

如果当前请求可能会建立多个连接，可以指定在某一个连接中获取查询日志，未指定的话将从最近一个连接中获取查询日志：

    DB::connection($con)->enableQueryLog();

Laravel服务提供者在平台短信服务中的应用

作者: hhhzua
时间: 2019-12-27
分类: Laravel
评论

我的个人博客：逐步前行STEP

服务提供者是一个有效的将工具与业务解耦的方案，下面结合一个实用案例来解释服务提供者在实现提供基础服务的工具中的应用。

服务提供者

服务提供者是 Laravel 应用启动的中心，所有 Laravel 的核心服务都是通过服务提供者启动，通过使用服务提供者来管理类的依赖和执行依赖注入，可以很好地将一些底层服务与应用层代码解耦。

短信服务

短信服务对于一个系统来说，是基础的、通用的服务，不依赖于业务细节，所以应该将其与业务解耦。

系统设计

将不同服务商的sdk称为驱动，短信服务应该满足以下需求：

可替换驱动
驱动实例化对使用者透明

1、可替换驱动

要满足第1点，首先应该使用接口约束对外暴露的方法，只有驱动满足接口约束，才能不影响业务直接替换驱动，于是设计接口：

<?php

namespace App\Interfaces;

Interface SmsDriverInterface
{

    public function sendMessage($phones, $template_id, $parameters);
}

如果接入的厂商是七牛云，则创建七牛云短信驱动，并在驱动中调用SDK实现功能：

<?php
namespace App;

use Qiniu\Auth;
use Qiniu\Http\Client;
use Qiniu\Http\Error;
use Qiniu\Sms\Sms;
class QiniuDriver implements SmsDriverInterface
{
    const HOST = 'https://sms.qiniuapi.com';

    const VERSION = 'v1';
    public function __construct()
    {
        $this->auth  = new Auth(config('access_key'), config('secret_key'));

        $this->sms = new Sms($this->auth);
    }
 
    public function sendMessage($phones, $template_id, $parameters = [])
    {
        $phones = array_map(function($item)
        {
            if(!is_string($item))
            {
                $item = strval($item);
            }

            return $item;
        }, $phones);

        $ret = $this->sms->sendMessage($template_id, $phones, $parameters);

        $result = $this->getResultApiRet($ret);

        return $result;
    }
}

别的厂商的驱动也这样实现接口SmsDriverInterface，在更换厂商的时候，换一个驱动实例化就可以了。

2、驱动实例化对使用者透明

此处的使用者就是使用短信服务实现业务需求的工程师啦，因为短信服务的基础、通用的特性，会被在业务中很多地方使用，如果更换驱动的话，会涉及很多具体业务代码的修改，所以需要创建一个服务类，用来统筹驱动的使用，具体业务中再调用这个服务类，驱动的实例化就对业务透明了：

<?php
namespace App;
class SmsService
{
    public $driver;
    
    public function driver($driver_name)
    {
        switch($driver_name)
        {
            case 'qiniu':
                $this->driver = new QiniuDriver();
            break;
            case 'aliyun':
                $this->driver = new AliyunDriver();
            break;
        }
    }
    
    public function senndMessage($phone, $template_id)
    {
        return $this->driver->sendMessage($phone, $template_id);
    }
}

再做改进，将传参选择驱动类型改为从配置中获取驱动类型：

<?php
namespace App;
class SmsService
{
    public $driver;
    
    public function driver()
    {
        switch(config('driver'))
        {
            case 'qiniu':
                $this->driver = new QiniuDriver();
            break;
            case 'aliyun':
                $this->driver = new AliyunDriver();
            break;
        }
    }
    ......
}

至此，基本满足了刚才所说的2点基本需求，但是，在增加驱动的时候要去改动driver()中的代码，增加其它驱动项，在服务类中枚举出所有的驱动似乎不够简洁，这里可以使用服务提供者再做优化：

<?php

namespace App\Providers;

use App\Interfaces\SmsDriverInterface;
use App\NullSms;
use App\QiniuSms;
use App\SmsService;
use Illuminate\Support\ServiceProvider;

class SmsServiceProvider extends ServiceProvider
{

    protected $defer = true;

    /**
     * Bootstrap the application services.
     *
     * @return void
     */
    public function boot()
    {

    }

    /**
     * Register the application services.
     *
     * @return void
     */
    public function register()
    {
        $this->app->singleton(SmsDriverInterface::class, function ($app) {

            switch(config('driver'))
            {
                case 'qiniu':
                    return new QiniuDriver();
            }

            return new NullSms();
        });
    }

    public function provides()
    {
        return [SmsDriverInterface::class];
    }
}

这里将驱动接口与配置中指定的具体驱动绑定，在服务类中的实例化方式可以改成依赖注入，因为短信驱动应该使用单例并且为了调用短信服务方便，将服务类中方法改为静态方法：

namespace App;
class SmsService
{
    public $driver;
    
    public function __construct(SmsDriverInterface $driver)
    {
        $this->driver = $driver;
    }
    
    public static function driver()
    {
        return app(self::class)->driver;
    }
    public static function sendMessage($phone, $template_id)
    {
        return SmsSend::driver()->sendMessage($phone, $template_id);
    }
}

最后将短信服务提供者添加到config/app.php文件的providers列表中，短信服务者的开发就完成了。

在这个案例中，短信服务提供者通过服务容器的依赖注入，实现了驱动在服务类中的自动实例化，在逻辑上将底层驱动与上层服务解耦。

这个案例比较简单，还有很多可以完善的地方，比如，不在服务提供者中能够使用switch去匹配驱动类型，而是增加一个驱动管理器，根据命名规则去实例化对应的驱动，这样的话就达到了增加并更换驱动的时候，只增加驱动类，以及更换config配置，就能“平滑”替换驱动的目的。

初识搜索引擎

作者: hhhzua
时间: 2019-12-17
分类: ElasticSearch
评论

我的个人博客：逐步前行STEP

搜索引擎结构

文本预处理

分词

    文本分词一般是先将文本分成独立的单词，然后取出标点符号，去除停止词，停止词就是一些使用频率高但是没有实际意义的词，比如：a、an、the、are等等

语言处理

对于英文来说，先是统一大小写，再对单词进行缩减，缩减过程主要有两种，一种是词干提取，即抽取词的词干或者词根，如：tional 缩减为 tion （去除形容词后缀）二是词形还原，即把词汇还原成一般形式，如：books 缩减为 book。

建立索引

经过文本预处理之后，得到的结果为词（Term），将得到的词创建成字典，然后对字典按字母顺序排序，最后合并相同的词，形成文档倒排表（Posting List），因为这个表中，是根据词来查找文档的，所以称为文档倒排表或者倒排索引。

搜索

根据用户的输入，进行词法分析、语法分析、语言处理然后从文档倒排表中获取结果，为了将最相关的结果显示在最前面，需要对搜索结果做相关性排序。

linux 环境下 openssl 生成ecdsa公、私钥

作者: hhhzua
时间: 2019-12-02
分类: openssl,Linux
评论

我的个人博客：逐步前行STEP

1、生成ecdsa私钥

openssl ecparam -name prime256v1 -genkey -noout -out prime256v1-key.pem

2、从ecdsa私钥提取公钥

openssl  pkey -in prime256v1-key.pem -pubout  -out public.pem

Laravel 中使用Goutte + GuzzleHttp 组件设置 headers无效的原因探究以及解决方案

作者: hhhzua
时间: 2019-11-07
分类: Laravel,PHP
评论

我的个人博客：逐步前行STEP

使用Goutte + GuzzleHttp 爬取网页时，如下代码中的请求头设置无效：

$jar = CookieJar::fromArray([
            "HMACCOUNT" => 'C0CDC28BD0110387',
        ], self::$host);

        $client = new GoutteClient();

        $guzzle_client = new GuzzleClient([
            'timeout'=>20,
            'headers'=>[
                'Referer'=>$prefix_url,
                'User-Agent'=>'Mozilla/5.0 (Macintosh; Intel Mac OS X 10_13_6) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/76.0.3809.100 Safari/537.36',
            ],
            'cookies' => $jar,
            'debug'=>true,
        ]);

        $client->setClient($guzzle_client);

经过研究源码发现，User-Agent 请求字段使用了默认值，没有应用传入的参数，而cookies配置则因为语法问题被覆盖丢失。

以下是具体探究过程：
在vendor/symfony/browser-kit/Client.php中：


......
    /**
     * @param array     $server    The server parameters (equivalent of $_SERVER)
     * @param History   $history   A History instance to store the browser history
     * @param CookieJar $cookieJar A CookieJar instance to store the cookies
     */
    public function __construct(array $server = [], History $history = null, CookieJar $cookieJar = null)
    {
        $this->setServerParameters($server);
        $this->history = $history ?: new History();
        $this->cookieJar = $cookieJar ?: new CookieJar();
    }
......
    /**
     * Sets server parameters.
     *
     * @param array $server An array of server parameters
     */
    public function setServerParameters(array $server)
    {
        $this->server = array_merge([
            'HTTP_USER_AGENT' => 'Symfony BrowserKit',
        ], $server);
    }
......

设置了$this->sever的初始值，然后在该文件的：

public function request(string $method, string $uri, array $parameters = [], array $files = [], array $server = [], string $content = null, bool $changeHistory = true)
    {
......

        $server = array_merge($this->server, $server);
......
        $this->internalRequest = new Request($uri, $method, $parameters, $files, $this->cookieJar->allValues($uri), $server, $content);
......
        if ($this->insulated) {
            $this->response = $this->doRequestInProcess($this->request);
        } else {
            $this->response = $this->doRequest($this->request);
        }
......

如果Goutte 的 request 中没有设置相同键的sever ，生成的请求对象的sever属性就初始化包含HTTP_USER_AGENT（因为当前需求是在实例化的时候传参作为全局配置，不考虑在request之前设置header来使配置生效的方案），而在vendor/fabpot/goutte/Goutte/Client.php中：

protected function doRequest($request)
    {
        $headers = array();
        foreach ($request->getServer() as $key => $val) {
            $key = strtolower(str_replace('_', '-', $key));
            $contentHeaders = array('content-length' => true, 'content-md5' => true, 'content-type' => true);
            if (0 === strpos($key, 'http-')) {
                $headers[substr($key, 5)] = $val;
            }
            // CONTENT_* are not prefixed with HTTP_
            elseif (isset($contentHeaders[$key])) {
                $headers[$key] = $val;
            }
        }
......
        if (!empty($headers)) {
            $requestOptions['headers'] = $headers;
        }
......
        // Let BrowserKit handle redirects
        try {
            $response = $this->getClient()->request($method, $uri, $requestOptions);
            }
......

可见，Request的sever属性被用于作为GuzzleHttp实例的请求头，不过在上面的代码中，键 HTTP_USER_AGENT 已经被更改为user-agent，而从vendor/guzzlehttp/guzzle/src/Client.php文件可以看出 GuzzleHttp 实例的request方法调用了requestAsync方法，requestAsync中将上面代码传入的$requestOptions 作为请求头字段，在该文件中，从构造器可知，本文第一段代码中传入构造器的参数都会作为配置使用，在方法configureDefaults和prepareDefaults都有做处理，并将传入的请求头从以header为键换成了以_conditional为键：

private function prepareDefaults($options)
    {
        $defaults = $this->config;

        if (!empty($defaults['headers'])) {
            // Default headers are only added if they are not present.
            $defaults['_conditional'] = $defaults['headers'];
            unset($defaults['headers']);
        }
......
}

在vendor/guzzlehttp/guzzle/src/Client.php的：

private function applyOptions(RequestInterface $request, array &$options)
{
......

        // Merge in conditional headers if they are not present.
        if (isset($options['_conditional'])) {
            // Build up the changes so it's in a single clone of the message.
            $modify = [];
            foreach ($options['_conditional'] as $k => $v) {
                if (!$request->hasHeader($k)) {
                    $modify['set_headers'][$k] = $v;
                }
            }
......

查找了_conditional数据是否在Request对象的请求头中存在，不存在就新增，至此，User-Agent配置失效的原因出来了，就是在此处被丢弃了，作如下修改，将传入的参数覆盖默认参数：

private function applyOptions(RequestInterface $request, array &$options)
{
......

        // Merge in conditional headers if they are not present.
        if (isset($options['_conditional'])) {
            // Build up the changes so it's in a single clone of the message.
            $modify = [];
            foreach ($options['_conditional'] as $k => $v) {
                if (!$request->hasHeader($k)) {
                //改动此处
                    $modify['set_headers'][$k] = $v;
                }
            }
......

这样，User-Agent配置就可以被正确使用了。

然而，设置的cookie还是无效，
继续调试源码，可以发现，在vendor/guzzlehttp/guzzle/src/Client.php的prepareDefaults 函数：

private function prepareDefaults($options)
    {
......
        // Shallow merge defaults underneath options.
        $result = $options + $defaults;
......        return $result;
    }

有一个合并数组的语句 $result = $options + $defaults;，但是，经过测试，该语句没有进行数组合并，我的php版本是7.1.3，这个应该跟版本有关，暂时没有查资料看具体适用于什么版本，我这儿直接改了就好了，类似还有该文件的另一处地方：

private function configureDefaults(array $config)
    {
......
        $this->config = $config + $defaults;
......

将其改成：

private function configureDefaults(array $config)
    {
......
        $this->config = array_merge($defaults, $config);
......

即可（array_merge中注意两个数组的顺序）。

hhhzua 发布的文章

Laravel 怎么查看执行的Sql语句

Laravel服务提供者在平台短信服务中的应用

服务提供者

短信服务

系统设计

1、可替换驱动

2、驱动实例化对使用者透明

初识搜索引擎

搜索引擎结构

文本预处理

分词

语言处理

建立索引

搜索

相关性排序

linux 环境下 openssl 生成ecdsa公、私钥

Laravel 中使用Goutte + GuzzleHttp 组件设置 headers无效的原因探究以及解决方案

最新文章

最近回复

分类

归档

其它