OpenResty从入门到实战
温铭
OpenResty软件基金会主席,《OpenResty 最佳实践》作者
立即订阅
4332 人已学习
课程目录
已完结 52 讲
0/4登录后,你可以任选4讲全文学习。
开篇词 (1讲)
开篇词 | OpenResty,为你打开高性能开发的大门
免费
入门篇 (14讲)
01 | 初探OpenResty的三大特性
02 | 如何写出你的“hello world”?
03 | 揪出隐藏在背后的那些子项目
04 | 如何管理第三方包?从包管理工具luarocks和opm说起
05 | [视频]opm项目导读
06 | OpenResty 中用到的 NGINX 知识
07 | 带你快速上手 Lua
08 | LuaJIT分支和标准Lua有什么不同?
09 | 为什么 lua-resty-core 性能更高一些?
10 | JIT编译器的死穴:为什么要避免使用 NYI ?
11 | 剖析Lua唯一的数据结构table和metatable特性
12 | 高手秘诀:识别Lua的独有概念和坑
13 | [视频]实战:基于FFI实现的lua-resty-lrucache
14 | 答疑(一):Lua 规则和 NGINX 配置文件产生冲突怎么办?
API篇 (11讲)
15 | OpenResty 和别的开发平台有什么不同?
16 | 秒杀大多数开发问题的两个利器:文档和测试案例
17 | 为什么能成为更好的Web服务器?动态处理请求和响应是关键
18 | worker间的通信法宝:最重要的数据结构之shared dict
19 | OpenResty 的核心和精髓:cosocket
20 | 超越 Web 服务器:特权进程和定时任务
21 | 带你玩转时间、正则表达式等常用API
22 | [视频]从一个安全漏洞说起,探寻API性能和安全的平衡
23 | [视频]导读lua-resty-requests:优秀的lua-resty-*是如何编写的?
24 | 实战:处理四层流量,实现Memcached Server
25 | 答疑(二):特权进程的权限到底是什么?
测试篇 (5讲)
26 | 代码贡献者的拦路虎:test::nginx 简介
27 | test::nginx 包罗万象的测试方法
28 | test::nginx 还可以这样用?
29 | 最容易失准的性能测试?你需要压测工具界的“悍马”wrk
30 | 答疑(三)如何搭建测试的网络结构?
性能优化篇 (16讲)
31 | 性能下降10倍的真凶:阻塞函数
32 | 让人又恨又爱的字符串操作
33 | 性能提升10倍的秘诀:必须用好 table
34 | 特别放送:OpenResty编码指南
35 | [视频]实际项目中的性能优化:ingress-nginx中的几个PR解读
36 | 盘点OpenResty的各种调试手段
37 | systemtap-toolkit和stapxx:如何用数据搞定“疑难杂症”?
38 | [视频]巧用wrk和火焰图,科学定位性能瓶颈
39 | 高性能的关键:shared dict 缓存和 lru 缓存
40 | 缓存与风暴并存,谁说缓存风暴不可避免?
41 | lua-resty-* 封装,让你远离多级缓存之痛
42 | 如何应对突发流量:漏桶和令牌桶的概念
43 | 灵活实现动态限流限速,其实没有那么难
44 | OpenResty 的杀手锏:动态
45 | 不得不提的能力外延:OpenResty常用的第三方库
46 | 答疑(四):共享字典的缓存是必须的吗?
API网关篇 (4讲)
47 | 微服务API网关搭建三步曲(一)
48 | 微服务API网关搭建三步曲(二)
49 | 微服务API网关搭建三步曲(三)
50 | 答疑(五):如何在工作中引入 OpenResty?
结束语 (1讲)
结束语 | 行百里者半九十
OpenResty从入门到实战
登录|注册

13 | [视频]实战:基于FFI实现的lua-resty-lrucache

温铭 2019-06-24
00:00 / 00:00
你好,我是温铭。
今天的内容,我同样会以视频的形式来讲解。不过,在你进行视频学习之前,我想先问你这么几个问题:
lua-resty-lrucache 内部最重要的数据结构是什么?
lua-resty-lrucache 有两种 FFI 的实现,我们今天讲的这一种更适合什么场景?
这几个问题,也是今天视频课要解决的核心内容,希望你可以先自己思考一下,并带着问题来学习今天的视频内容。
同时,我会给出相应的文字介绍,方便你在听完视频内容后,及时总结与复习。下面是今天这节课的文字介绍部分。

今日核心

lua-resty-lrucache 是一个使用 LuaJIT FFI 实现的 LRU 缓存库,可以在 worker 内缓存各种类型的数据。功能与之类似的是 shared dict,但 shared dict 只能存储字符串类型的数据。在大多数实际情况下,这两种缓存是配合在一起使用的——lrucache 作为一级缓存,shared dict 作为二级缓存。
lrucache 的实现,并没有涉及到 OpenResty 的 Lua API。所以,即使你以前没有用过 OpenResty,也可以通过这个项目来学习如何使用 LuaJIT 的 FFI。
lrucache 仓库中包含了两种实现方案,一种是使用 Lua table 来实现缓存,另外一种则是使用 hash 表来实现。前者更适合命中率高的情况,后者适合命中率低的情况。两个方案没有哪个更好,要看你的线上环境更适合哪一个。
取消
完成
0/1000字
划线
笔记
复制
© 版权归极客邦科技所有,未经许可不得传播售卖。 页面已增加防盗追踪,如有侵权极客邦将依法追究其法律责任。
该试读文章来自付费专栏《OpenResty从入门到实战》,如需阅读全部文章,
请订阅文章所属专栏。
立即订阅
登录 后留言

精选留言(10)

  • Leon📷
    专栏订阅人好少,跟陶辉老师的nginx一样,到后面都没什么人留言了,曲高和寡,不过留下来的都是未来的大牛,学好了未来在工作和求职过程中多了一份竞争力
    2019-06-30
    2
  • yswang
    温大,我之前使用 openresty + ffmpeg 做了一个音频格式换行http服务,我使用先写一个 shell 转换脚本文件,例如:audio_converter.sh (sh文件中调用 ffmepg -i 转换命令),然后使用 lua 的 os.execute("/bin/sh audio_converter.sh a.mp3 b.ogg") 来调用 shell 脚本文件间接调用 ffmpeg 指令进行转换。 今天看到了 ffi ,ffi 可以调用 C 函数,请问,ffi 可以直接调用 ffmpeg 指令吗?如果可以的话,我就可以省去写一个 shell 文件来间接调用了。

    作者回复: 有一个 ffmpeg 的库:https://github.com/daurnimator/ffmpeg-lua-ffi,你可以试下是否满足需求

    2019-06-26
    1
    2
  • 丢了个丢丢丢
    老师讲的好好哦!!!
    2019-06-24
    1
    2
  • 微众_廖卫军
    温铭老师,您好! FFI调用自己封装的函数库,ffi.load(name[,global]),是否只能是动态库?不能调用静态库吗? 谢谢!
    2019-09-23
  • chrisforbt
    老师,我想问个问题。我计划将用户请求的参数+路径+方式做为key,把数据存在lru-cache、share dict以及redis中,mysql数据源更新了,我就得将缓存全删了。那我是应该把mysql的数据源和前面生成的key关联起来,一旦更新了数据源,就去找相关的key,将其删除吗?还有更佳的缓存更新方式吗,期待您的回复。

    作者回复: 你这种是主动更新,MySQL 数据变化后主动通知前面的缓存。主动更新的话,也不用主动去删除缓存,而是在 key 里面加入一个版本号,数据变化后版本号变了,那么在缓存中就查找不到数据,这时候就回源到 MySQL 了。
    也可以被动更新,根据你的业务特性,给缓存设置一个过期时间,定期的去数据库查询。
    第一种版本号的方法是比较合适的,当然实现起来比被动更新复杂一些。

    2019-07-15
  • emen
    温铭老师您好,关于lrucache在使用过程中有个疑惑烦请老师看看。
    openresty环境:1个master进程、X个worker进程
    在init_worker阶段中注册了缓存信息如:cache.set("key1","val1")
    在content阶段修改了缓存信息:cache.set("key1","val2")
    此操作是否仅为更新了当前worker的缓存信息,而无法跨worker更新。
    如需完成跨worker更新应如何处理呢?

    作者回复: 改用 shared dict,或者是使用 lua-resty-worker-event 这样的库

    2019-07-10
  • 星亦辰
    请教老师一个问题。

    我用c语言实现了跨平台的so类库。 用ffi.load 来加载。
    那么,在openrestry 中会有几个 so 函数的实例呢?
    按照操作系统的知识,共享库在系统中只有一个实例。

    如果只有一个,那么我们在不同的worker 中调用so 里的函数中,对于一个so 内的资源是否存在冲突呢?

    作者回复: OpenResty 中的 worker 是互相独立的,如果你在 worker 中使用 ffi.load 来加载 so,那么有几个 worker 进程,就会有几个 so 实例。

    2019-07-04
  • 小飞哥 ‍超級會員
    都有视频了,温老师,能否现场演示一下, 让我们见识 openresty 的复杂性。 一些文档库 官网描述等,能否现场打开了解下。 我们自己打开后,就没有然后了。

    作者回复: 我的理解,OpenResty 的复杂性在于各个子项目之间的配合,还是需要有特定的场景和业务需求来驱动,才会更有感觉。你可以参与到 OpenResty 相关的开源项目中来,切身体会下。

    2019-07-02
  • . 。o O 〇
    老师好,我碰到一个问题,我用的lrucache,会卡在get set那,并且worker进程cpu100%,整个worker不工作。换成lrucache.pureffi就好了,不知道老师碰到过没

    作者回复: 这个没有遇到过。是否是这个 bug:https://github.com/openresty/luajit2/issues/42? 用最新的 OpenResty 版本是否可以重现呢?
    如果还是有问题,欢迎给官方提交 issue

    2019-06-26
    1
  • 冰沁宇诺
    老师,如果我想从数据库中初始化一些基本不变的数据到shared_dict中,应该怎么做,init_by_lua 阶段可以吗

    作者回复: 可以的,在这个阶段启动一个 timer 去读取数据库,然后放到 shared dict 中。但要注意,这个数据是可以丢失的,代码中要处理这种异常。

    2019-06-24
收起评论
10
返回
顶部