如何在 Deno 应用程序中调用 Rust 函数

做者:Michael Yuan
原文连接: https://www.infoq.com/article...

如何在 Deno TypeScript 应用程序访问 Rust 函数?node

1image-5-1594801176405.jpg

要点:

  • Deno 和 Node.js 都在基于 C/C ++ 的运行时上执行 JavaScript 以实现高性能。
  • Deno 是单个二进制应用程序,与 NPM 模块不兼容,而且没有简单的方法能将本机模块合并到应用程序中。
  • WebAssembly 提供了一种在 Deno 应用程序中运行高性能代码的方法。
  • WebAssembly 用于服务端应用程序,是安全、轻便且轻量级的容器。
  • Rust 编译器工具链为 WebAssembly 提供了强大的支持。

备受期待的 Deno 项目不久前发布了 1.0 版本。 Deno 由 Node.js 的建立者之一 Ryan Dahl 发起,解决 Ryan 所认为的“我为 Node.js 感到遗憾的十件事”。git

Deno 没有采用 NPM 和臭名昭著的 node_modules。 Deno 是一个单一的二进制可执行文件,运行用 TypeScript 和 JavaScript 编写的应用程序。github

可是,尽管 TypeScript 和 JavaScript 适用于大多数的 Web 应用程序,但它们不能知足计算密集型任务,例如神经网络训练和推理、机器学习和密码学。 实际上,Node.js 常常须要使用本地库来执行这些任务(例如,使用 openssl 进行加密)。web

若是没有相似 NPM 的系统来合并本机模块,咱们如何在 Deno 上编写须要本机性能的服务端应用程序呢? WebAssembly 将提供帮助! 在本文中,咱们用 Rust 编写高性能函数,将 Rust 函数编译为 WebAssembly,而后在 Deno 应用程序中运行它们。算法

TL;DR

在 GitHub 上 clone 或者 fork Deno starter 模板。按照下面的说明进行操做,只需5分钟,就能够在 Deno 中运行 WebAssembly 函数(由 Rust 编写)。sql

背景知识

Node.js 之因此很是成功,是由于它为开发人员带来了一箭双鵰的优点:JavaScript 的易用性(尤为是基于事件的异步应用程序)以及 C/C ++ 的高性能。 Node.js 应用程序是用 JavaScript 编写的,可是在基于 C / C ++ 的本机运行时中执行,例如,Google V8 JavaScript 引擎和许多本机库模块。 Deno 但愿复制此公式以取得成功,但不一样的是,Deno 用 TypeScript 和 Rust 支持现代技术堆栈。json

Deno 是用 Rust 编写的,基于 V8 的 JavaScript 和 TypeScript 的简单、现代且安全的运行时。 -deno.land网站。

《我对 Node.js 感到遗憾的十件事》这个著名演讲中,Node.js 的建立者 Ryan Dahl 解释了为何要开始 Deno 并将 Deno 看作 Node.js 的竞争对手甚至替代者。Dahl 的遗憾集中在 Node.js 如何管理第三方代码和模块上。数组

  • 用于将 C 模块链接到 Node.js 的复杂构建系统。
  • package.jsonnode_modulesindex.js 以及其余 NPM 工件很是复杂,可是这并非必须的。

所以,Deno 在管理依赖项时作出了一些很是有意识和自觉的选择。安全

  • Deno 是单个二进制可执行文件。
  • 应用程序使用 TypeScript 或 JavaScript 编写,而且在代码中将依赖关系明确声明为 import 语句,并带有完整 URL 链接到依赖关系的源代码。
  • Deno 与 Node.js 模块不兼容。

这很好。可是,须要更高性能的应用程序应该怎么作呢?特别是须要在几秒钟以内执行复杂的神经网络模型的AI即服务应用程序,该如何处理呢? 在 Deno 和 Node.js 中,许多函数都是经过 TypeScript 或 JavaScript API 调用的,可是这些函数都是在用 Rust 或 C 语言编写的本机代码执行。在 Node.js 中,始终能够选择从 JavaScript API 调用第三方的本地库。 可是咱们目前没法在 Deno 中执行此操做吗?网络

Deno 中的 WebAssembly 支持

WebAssembly 是一种轻量级虚拟机,旨在以接近本机的速度执行可移植的字节码。你能够将 Rust 或 C C ++ 函数编译为WebAssembly 字节码,而后从 TypeScript 访问这些函数。对于某些任务,这种方式比执行 TypeScript 编写的等效函数要快得多。例如,IBM 发布的研究发如今某些数据处理算法中使用 Rust 和 WebAssembly ,能够将 Node.js 的执行速度提升 1200% 至 1500% 。

Deno 内部使用 Google V8 引擎。 V8 不只是 JavaScript 运行时,仍是 WebAssembly 虚拟机。 Deno 开箱即用地支持WebAssembly。 Deno 为 TypeScript 应用程序提供了一个API,以调用 WebAssembly 中的函数。

实际上,WebAssembly 中已经实现了一些流行的 Deno 组件。例如,使用 Emscripten 将 sqlite 的 C 源代码编译到 WebAssembly 中来建立 Deno 中的 sqlite 模块Deno WASI 组件使 WebAssembly 应用程序能够访问底层操做系统资源,例如文件系统。本文将展现如何在 Rust 和 WebAssembly 中编写高性能 Deno 应用程序。

设置

第一步固然是安装 Deno, 在大多数操做系统中,只须要一行命令

$ curl -fsSL https://deno.land/x/install/install.sh | sh

既然咱们要用 Rust 写函数,也须要安装 Rust 语言的编译器与工具.

$ curl --proto '=https' --tlsv1.2 -sSf https://sh.rustup.rs | sh

最后,ssvmup 工具自动执行构建过程并生成全部工件,使 Deno 应用程序能够轻松调用 Rust 函数。一样,须要安装 ssvmup 依赖项。

$ curl https://raw.githubusercontent.com/second-state/ssvmup/master/installer/init.sh -sSf | sh

注意:ssvmup 使用 wasm-bindgen 在 JavaScript 和 Rust 源代码之间自动生成“胶水”代码,以便 JavaScript 和 Rust 可使用各自的本机数据类型进行通讯。没有 ssvmup,函数参数和返回值将限于 WebAssembly 本地支持的简单类型(即32位整数)。例如,若是没有 ssvmup 和 wasm-bindgen,则没法使用字符串或数组。

Hello world

首先,让咱们看一下Deno 的 hello world 示例,从 GitHub 获取 hello world 源代码和应用程序模板。

Rust 函数位于 src/lib.rs 文件中,只需在输入字符串前加上“ hello” 便可。注意,say() 函数使用#[wasm_bindgen]进行了注释,从而使 ssvmup 能够生成必要的“管道”。基于此,咱们能够从 TypeScript 调用 Rust 函数。

#[wasm_bindgen]
pub fn say(s: &str) -> String {
  let r = String::from("hello ");
  return r + s;
}

Deno 应用程序位于 deno / server.ts 文件中。该应用程序从 pkg / functions_lib.js 文件导入 Rust 的 say() 函数,该文件由 ssvmup 工具生成。 functions_lib.js 文件名取决于 Cargo.toml 文件中定义的 Rust 项目名称。

import { serve } from "https://deno.land/std@0.54.0/http/server.ts";
import { say } from '../pkg/functions_lib.js';

type Resp = {
    body: string;
}

const s = serve({ port: 8000 });
console.log("http://localhost:8000/");
for await (const req of s) {
  let r = {} as Resp;
  r.body = say (" World\n");
  req.respond(r);
}

如今,运行 ssvmup 将 Rust 函数构建为 Deno WebAssembly 函数。

$ ssvmup build --target deno

ssvmup 成功完成后,您能够检查 pkg / functions_lib.js 文件,了解如何使用 Deno WebAssembly API 执行已编译的 WebAssembly 文件 pkg / functions_lib.wasm

接下来,运行 Deno 应用程序。 Deno 须要读取文件系统的权限,由于它须要加载 WebAssembly 文件。同时,Deno 也须要访问网络,由于它须要接收和响应 HTTP 请求。

$ deno run --allow-read --allow-net deno/server.ts

如今,在另外一个终端窗口中,能够访问 Deno Web 应用程序,经过 HTTP 链接 say hello!

$ curl http://localhost:8000/

hello World

一个复杂的例子

这个入门模板项目包括许多详细的示例,展现了如何在 Deno TypeScript 和 Rust 函数之间传递复杂的数据。这是 src/lib.rs 中其余的 Rust 函数。请注意,它们都用 #[wasm_bindgen]注释。

#[wasm_bindgen]
pub fn obfusticate(s: String) -> String {
  (&s).chars().map(|c| {
    match c {
      'A' ..= 'M' | 'a' ..= 'm' => ((c as u8) + 13) as char,
      'N' ..= 'Z' | 'n' ..= 'z' => ((c as u8) - 13) as char,
      _ => c
    }
  }).collect()
}

#[wasm_bindgen]
pub fn lowest_common_denominator(a: i32, b: i32) -> i32 {
  let r = lcm(a, b);
  return r;
}

#[wasm_bindgen]
pub fn sha3_digest(v: Vec<u8>) -> Vec<u8> {
  return Sha3_256::digest(&v).as_slice().to_vec();
}

#[wasm_bindgen]
pub fn keccak_digest(s: &[u8]) -> Vec<u8> {
  return Keccak256::digest(s).as_slice().to_vec();
}

也许最有趣的是 create_line() 函数。这个函数须要两个 JSON 字符串。每一个字符串表明一个 Point 结构,并返回一个表明 Line 结构的 JSON 字符串。注意,Point Line 结构都使用 SerializeDeserialize 进行了注释,以便 Rust 编译器自动生成必要的代码来支持它们与 JSON 字符串之间的转换。

use wasm_bindgen::prelude::*;
use serde::{Serialize, Deserialize};

#[derive(Serialize, Deserialize, Debug)]
struct Point {
  x: f32,
  y: f32
}

#[derive(Serialize, Deserialize, Debug)]
struct Line {
  points: Vec<Point>,
  valid: bool,
  length: f32,
  desc: String
}

#[wasm_bindgen]
pub fn create_line (p1: &str, p2: &str, desc: &str) -> String {
  let point1: Point = serde_json::from_str(p1).unwrap();
  let point2: Point = serde_json::from_str(p2).unwrap();
  let length = ((point1.x - point2.x) * (point1.x - point2.x) + (point1.y - point2.y) * (point1.y - point2.y)).sqrt();

  let valid = if length == 0.0 { false } else { true };
  let line = Line { points: vec![point1, point2], valid: valid, length: length, desc: desc.to_string() };
  return serde_json::to_string(&line).unwrap();
}

#[wasm_bindgen]
pub fn say(s: &str) -> String {
  let r = String::from("hello ");
  return r + s;
}

接下来,让咱们检查一下 JavaScript 程序 deno/test.ts,这显示了如何调用 Rust 函数。String&str 是 JavaScript 中的简单字符串,i32 是数字,而 Vec <u8>&[8] 是 JavaScript Uint8Array。 JavaScript 对象须要先经过 JSON.stringify()JSON.parse() 才能传入 Rust 函数或从 Rust 函数返回。

import { say, obfusticate, lowest_common_denominator, sha3_digest, keccak_digest, create_line } from '../pkg/functions_lib.js';

const encoder = new TextEncoder();

console.log( say("SSVM") );
console.log( obfusticate("A quick brown fox jumps over the lazy dog") );
console.log( lowest_common_denominator(123, 2) );
console.log( sha3_digest(encoder.encode("This is an important message")) );
console.log( keccak_digest(encoder.encode("This is an important message")) );

var p1 = {x:1.5, y:3.8};
var p2 = {x:2.5, y:5.8};
var line = JSON.parse(create_line(JSON.stringify(p1), JSON.stringify(p2), "A thin red line"));
console.log( line );

运行 ssvmup 构建 Rust 库以后,在 Deno 运行时中运行 deno/test.ts 会产生如下输出:

$ ssvmup build --target deno
... Building the wasm file and JS shim file in pkg/ ...

$ deno run --allow-read deno/test.ts
hello SSVM
N dhvpx oebja sbk whzcf bire gur ynml qbt
246
Uint8Array(32) [
  87, 27, 231, 209, 189, 105, 251,  49,
  ... ...
]
Uint8Array(32) [
  126, 194, 241, 200, 151, 116, 227,
  ... ...
]
{
  points: [ { x: 1.5, y: 3.8 }, { x: 2.5, y: 5.8 } ],
  valid: true,
  length: 2.2360682,
  desc: "A thin red line"
}

接下来是什么?

如今,咱们能够建立 Rust 函数,并从 Deno TypeScript 应用程序访问 Rust 函数。接下来,咱们能够用 Rust 函数编写计算密集型任务,并经过 Deno 提供高性能和安全的 Web 服务。此类服务的示例包括机器学习图像识别

相关文章
相关标签/搜索