native_modules.html 8.4 KB

123456789101112131415161718192021222324252627282930313233343536373839404142434445464748495051525354555657585960616263646566676869707172737475767778798081828384858687888990919293949596979899100101102103104105106107108109110111112113114115116117118119120121122123124125126127128129130131132133134135136137138139140141142143144145146147148149150151152153154155156157158159160161162163164165166167168169170171172173174175176177178179180181182183184185186187188189190191192193194195196197198199200201202203204205206207208209210211212213
  1. <!DOCTYPE html>
  2. <html lang="en">
  3. <head>
  4. <meta charset="UTF-8">
  5. <title>xmake</title>
  6. <link rel="icon" href="/assets/img/favicon.ico">
  7. <meta http-equiv="X-UA-Compatible" content="IE=edge,chrome=1" />
  8. <meta name="description" content="Description">
  9. <meta name="viewport" content="width=device-width, user-scalable=no, initial-scale=1.0, maximum-scale=1.0, minimum-scale=1.0">
  10. <link href="/assets/npm/github-markdown/github-markdown.min.css" rel="stylesheet">
  11. <style>
  12. .markdown-body {
  13. box-sizing: border-box;
  14. min-width: 200px;
  15. max-width: 980px;
  16. margin: 0 auto;
  17. padding: 45px;
  18. }
  19. @media (max-width: 767px) {
  20. .markdown-body {
  21. padding: 15px;
  22. }
  23. }
  24. </style>
  25. </head>
  26. <body>
  27. <article class="markdown-body">
  28. <h4>This is a mirror page, please see the original page: </h4><a href="https://xmake.io/#/zh-cn/manual/native_modules">https://xmake.io/#/zh-cn/manual/native_modules</a>
  29. <div id="wwads-panel" class="wwads-cn wwads-vertical wwads-sticky" data-id="239" style="max-width:180px;bottom:20px;right:20px;width:200px;height:260px;background:#fff;position:fixed"></div>
  30. </br>
  31. <script type="text/javascript" charset="UTF-8" src="https://cdn.wwads.cn/js/makemoney.js" async></script>
  32. <script async type="text/javascript" src="//cdn.carbonads.com/carbon.js?serve=CE7I52QU&placement=xmakeio" id="_carbonads_js"></script>
  33. <style>
  34. #carbonads {
  35. font-family: -apple-system, BlinkMacSystemFont, "Segoe UI", Roboto, Oxygen-Sans, Ubuntu,
  36. Cantarell, "Helvetica Neue", Helvetica, Arial, sans-serif;
  37. }
  38. #carbonads {
  39. display: flex;
  40. max-width: 330px;
  41. background-color: hsl(0, 0%, 98%);
  42. box-shadow: 0 1px 4px 1px hsla(0, 0%, 0%, .1);
  43. }
  44. #carbonads a {
  45. color: inherit;
  46. text-decoration: none;
  47. }
  48. #carbonads a:hover {
  49. color: inherit;
  50. }
  51. #carbonads span {
  52. position: relative;
  53. display: block;
  54. overflow: hidden;
  55. }
  56. #carbonads .carbon-wrap {
  57. display: flex;
  58. }
  59. .carbon-img {
  60. display: block;
  61. margin: 0;
  62. line-height: 1;
  63. }
  64. .carbon-img img {
  65. display: block;
  66. }
  67. .carbon-text {
  68. font-size: 13px;
  69. padding: 10px;
  70. line-height: 1.5;
  71. text-align: left;
  72. }
  73. .carbon-poweredby {
  74. display: block;
  75. padding: 8px 10px;
  76. background: repeating-linear-gradient(-45deg, transparent, transparent 5px, hsla(0, 0%, 0%, .025) 5px, hsla(0, 0%, 0%, .025) 10px) hsla(203, 11%, 95%, .4);
  77. text-align: center;
  78. text-transform: uppercase;
  79. letter-spacing: .5px;
  80. font-weight: 600;
  81. font-size: 9px;
  82. line-height: 1;
  83. }
  84. </style>
  85. <p>构建流程里可以使用原生模块。</p>
  86. <h3 id="">原生模块</h3>
  87. <p>我们知道,在 xmake 中,可以通过 import 接口去导入一些 lua 模块在脚本域中使用,但是如果一些模块的操作比较耗时,那么 lua 实现并不是理想的选择。<br>因此,新版本中,我们新增了 native lua 模块的支持,可以通过 native 实现,来达到提速优化的效果,并且模块导入和使用,还是跟 lua 模块一样简单。</p>
  88. <p>使用原生模块时,xmake 会进行两段编译,先会自动编译原生模块,后将模块导入 lua 作为库或二进制,而对于用户,仅仅只需要调用 import 导入即可。</p>
  89. <h4 id="">定义动态库模块</h4>
  90. <p>动态库模块的好处是,不仅仅通过 native 实现了性能加速,另外避免了每次调用额外的子进程创建,因此更加的轻量,速度进一步得到提升。</p>
  91. <p>我们可以先定义一个动态库模块,里面完全支持 lua 的所有 c API,因此我们也可以将一些第三方的开源 lua native 模块直接引入进来使用。</p>
  92. <p>这里我们也有一个完整的导入 lua-cjson 模块的例子可以参考:<a href="https://github.com/xmake-io/xmake/tree/master/tests/projects/other/native_module_cjson">native_module_cjson</a></p>
  93. <p>首先,我们先实现 shared 的 native 代码,所以接口通过 lua API 导出。</p>
  94. <p>./modules/foo/foo.c</p>
  95. <pre><code class="lang-c++">#include <xmi.h>
  96. static int c_add(lua_State* lua) {
  97. int a = lua_tointeger(lua, 1);
  98. int b = lua_tointeger(lua, 2);
  99. lua_pushinteger(lua, a + b);
  100. return 1;
  101. }
  102. static int c_sub(lua_State* lua) {
  103. int a = lua_tointeger(lua, 1);
  104. int b = lua_tointeger(lua, 2);
  105. lua_pushinteger(lua, a - b);
  106. return 1;
  107. }
  108. int luaopen(foo, lua_State* lua) {
  109. // 收集add和sub
  110. static const luaL_Reg funcs[] = {
  111. {"add", c_add},
  112. {"sub", c_sub},
  113. {NULL, NULL}
  114. };
  115. lua_newtable(lua);
  116. // 传递函数列表
  117. luaL_setfuncs(lua, funcs, 0);
  118. return 1;
  119. }
  120. </code></pre>
  121. <p>注意到这里,我们 include 了一个 <code>xmi.h</code> 的接口头文件,其实我们也可以直接引入 <code>lua.h</code>,<code>luaconf.h</code>,效果是一样的,但是会提供更好的跨平台性,内部会自动处理 lua/luajit还有版本间的差异。</p>
  122. <p>然后,我们配置 <code>add_rules("modules.shared")</code> 作为 shared native 模块来编译,不需要引入任何其他依赖。</p>
  123. <p>甚至连 lua 的依赖也不需要引入,因为 xmake 主程序已经对其导出了所有的 lua 接口,可直接使用,所以整个模块是非常轻量的。</p>
  124. <p>./modules/foo/xmake.lua</p>
  125. <pre><code class="lang-lua">add_rules("mode.debug", "mode.release")
  126. target("foo")
  127. -- 指定目标为库lua模块
  128. add_rules("module.shared")
  129. add_files("foo.c")
  130. </code></pre>
  131. <h4 id="">定义二进制模块</h4>
  132. <p>出了动态库模块,我们还提供了另外一种二进制模块的导入。它其实就是一个可执行文件,每次调用模块接口,都会去调用一次子进程。</p>
  133. <p>那它有什么好处呢,尽管它没有动态库模块那么高效,但是它的模块实现更加的简单,不需要调用 lua API,仅仅只需要处理参数数据,通过 stdout 去输出返回值即可。</p>
  134. <p>另外,相比二进制分发,它是通过源码分发的,因此也解决了跨平台的问题。</p>
  135. <p>具体是使用动态库模块,还是二进制模块,具体看自己的需求,如果想要实现简单,可以考虑二进制模块,如果想要高效,就用动态库模块。</p>
  136. <p>另外,如果需要通过并行执行来提速,也可以使用二进制模块。</p>
  137. <p>./modules/bar/bar.cpp</p>
  138. <pre><code class="lang-c++">#include <stdio.h>
  139. #include <stdlib.h>
  140. #include <cstdlib>
  141. int main(int argc, char** argv) {
  142. int a = atoi(argv[1]);
  143. int b = atoi(argv[2]);
  144. printf("%d", a + b);
  145. return 0;
  146. }
  147. </code></pre>
  148. <p>./modules/bar/xmake.lua</p>
  149. <pre><code class="lang-lua">add_rules("mode.debug", "mode.release")
  150. target("add")
  151. -- 指定目标为二进制lua模块
  152. add_rules("module.binary")
  153. add_files("bar.cpp")
  154. </code></pre>
  155. <h4 id="">导入原生模块</h4>
  156. <p>对于模块导入,我们仅仅需要调用 import,跟导入 lua 模块的用法完全一致。</p>
  157. <p>./xmake.lua</p>
  158. <pre><code class="lang-lua">add_rules("mode.debug", "mode.release")
  159. -- 添加./modules目录内原生模块
  160. add_moduledirs("modules")
  161. target("test")
  162. set_kind("phony")
  163. on_load(function(target)
  164. import("foo", {always_build = true})
  165. import("bar")
  166. print("foo: 1 + 1 = %s", foo.add(1, 1))
  167. print("foo: 1 - 1 = %s", foo.sub(1, 1))
  168. print("bar: 1 + 1 = %s", bar.add(1, 1))
  169. end)
  170. </code></pre>
  171. <p>由于插件模块的构建是跟主工程完全独立的,因此,native 模块只会被构建一次,如果想要触发增量的插件编译,需要配置上 <code>always_build = true</code>,这样,xmake 就会每次检测插件代码是否有改动,如果有改动,会自动增量构建插件。</p>
  172. <p>首次执行效果如下:</p>
  173. <pre><code class="lang-bash">ruki-2:native_module ruki$ xmake
  174. [ 50%]: cache compiling.release src/foo.c
  175. [ 50%]: cache compiling.release src/bar.c
  176. [ 75%]: linking.release libmodule_foo.dylib
  177. [ 75%]: linking.release module_bar
  178. [100%]: build ok, spent 1.296s
  179. foo: 1 + 1 = 2
  180. foo: 1 - 1 = 0
  181. bar: 1 + 1 = 2
  182. [100%]: build ok, spent 0.447s
  183. </code></pre>
  184. <p>第二次执行,就不会再构建插件,可以直接使用模块:</p>
  185. <pre><code class="lang-bash">ruki-2:native_module ruki$ xmake
  186. foo: 1 + 1 = 2
  187. foo: 1 - 1 = 0
  188. bar: 1 + 1 = 2
  189. [100%]: build ok, spent 0.447s
  190. </code></pre>
  191. <h4 id="codegen">作为 codegen 来使用</h4>
  192. <p>通过新的 native 模块特性,我们也可以用来实现 auto-codegen,然后根据自动生成的代码,继续执行后续编译流程。</p>
  193. <p>这里也有完整的例子可以参考:<a href="https://github.com/xmake-io/xmake/tree/master/tests/projects/other/autogen_shared_module">autogen_shared_module</a>。</p>
  194. </article>
  195. </body>
  196. </html>