Ultimate Rust 2
https://www.udemy.com/course/ultimate-rust-2/
Idiomatic Code
Idiomatic とは、「〔言葉が〕母語話者が自然に使うような、その言語特有の特徴を見せる」という意味の形容詞。
ソフトウェア工学における「Idiomatic」とは、「与えられた文脈における自然な表現様式に従う」という意味。具体的には以下のようなことを指す。「要はバランス」案件なので、原理主義者にならないよう注意すること。
- 言語の機能を最大限に活用して、コードを簡潔で読みやすくする。ただし、書き方に関す る議論に明け暮れてはダメ。
- コミュニティの標準的なコーディングスタイルに従う。ただし、流行に過度に影響されてはダメ。
- 公式ドキュメントやライブラリの使用方法に従う。ただし、それが実績あるエンジニアリングのやり方と反する場合には適切に破棄できる程度に尊重する。
Rust の Idiomatic Code
cargo fmt
でコードをフォーマットできる。IntelliJ の設定からrustfmt
で検索し、Use Rustfmt instead of the built-in formatter
にチェックを入れてたうえで、保存時にフォーマットがかかる設定にしておくと便利。
cargo clippy
で様々な検査を行える。Style, Correctness(e.g. 消してもいいようなコード), Complexity(e.g. 無駄に複雑), Performance(e.g. 無駄に遠回り)に関する指摘をしてくれる。 警告を無視したい場合は#[allow(clippy::xxx)]
のようにする。
Domumentation
cargo doc --no-deps --open
を使うと良い。--no-deps
をつけると依存関係のライブラリのドキュメントを生成しない。--open
をつけるとブラウザで開く。
デフォルトではpub
になっているものがドキュメントに含まれる。///
または/** **/
でコメントを書くと、そのコメントがドキュメント に含まれる。
基本的な書き方はマークダウン記法だが、一点だけ違いがある。それは、[]
の一発でリンクを貼ることができることだ。リンクはスコープ内のものであればなんでもよく、もしほしいものがスコープ内になければ、絶対パスを使えばよい。
/// link to the [`SOME_VALUE_IN_SCOPE`]
/// link to the [SOME_VALUE_IN_SCOPE]
/// [click here!](SOME_VALUE_IN_SCOPE)
ドキュメントには Outer Documentation///
と Inner Documentation//!
がある。Inner Documentation は、主にモジュール自体やクレートのルートファイルに対して使われる。
ドキュメントを書いておくと、Crate.io に自分のライブラリを公開したときに自動的に Web ページが生成される。
Iterator
for ループはイテレータを使ったパターンに書き換えられる。
let v = vec![1, 2, 3];
for i in v {
println!("{}", i);
}
// これは以下のようにも書ける
v.into_iter().for_each(|i| {
println!("{}", i);
});
このようにするメリットは、Iterator Adaptor を使えることと、わずかに速度が速いこと。
Iterator Adaptorは関数型プログラミングの道具の一つ。イテレータを受け取り別の イテレータを返す。その際、値に対して何らかのアクションを行う。例えば、.map()
や.filter()
などがある。
Iterator Consumerはイテレータを消費する。例えば、.for_each()
、.collect()
、.sum()
などがある。Iterator Adaptor は Lazy であり、Consumer に到達して初めて実行される。
Consumer ではジェネリック型が多用されており、明示的な型指定が必要となる場面が多い。ターボフィッシュ(::<>
)を使って、collect::<Vec<_>>()
のようにする。あるいは変数に代入する場合は、let result: Vec<_> = hogehoge.collect()
のように変数に型注釈を行う。_
は型推論を行わせるためのもので、特に値が複雑な型の場合は超便利である。
イテレータのドキュメントを見ることで、型などの詳細を確認できる。
コレクションをイテレータに変換するメソッドは複数ある。
メソッド | 糖衣構文 | 用途 | 値 |
---|---|---|---|
.into_iter() | for _ in v | コレクションを完全に消費する際に使用 | 所有権のある要素群 |
.iter() | for _ in &v | 値を変更せず、読み取りたい場合 | 不変参照群 |
.iter_mut() | for _ in &mut v | コレクションの値を変更したい場合 | 可変参照群 |
コレクションを消費することなくコレクションを空にしたり、一部を抜き出したい場合には、.drain()
が便利。コレクション以外にもハッシュマップ等にも使える。
let mut v = vec![6, 7, 8, 9, 10];
let drained: Vec<_> = v.drain(1..4).collect();
assert_eq!(v, vec![6, 10]);
assert_eq!(drained, vec![7, 8, 9]);
Common Traits
トレイトを実装できるのは、struct, enum, closure, function の 4 つだが、メインは struct と enum である。
自動でトレイトを実装する (Derivable Traits)
特定の条件において、開発者がコードを書かずともコンパイラにより自動的に実装されるトレイトのこと。#[derive(Trait1,Trait2)]
のように書くだけで自動で実装される。Derive ができるかどうかは、そのトレイトのドキュメントに記載されている。
Debug
デバッグ用の出力を行うためのトレイト。適用するには対象の Struct や Enum のすべてのフィールドに Debug トレイトが実装されている必要がある。なお、プリミティブ型や多くのライブラリの型には、 Debug トレイトがあらかじめ実装されている。
println!("{:?}", hogehoge)
1 行で出力println!("{:#?}", hogehoge)
Pretty に複数行で出力
Clone
値を複製するためのトレイト。適用するには対象の Struct や Enum のすべてのフィールドに Clone トレイトが実装されている必要がある。.clone()
メソッドを実行することで値が複製される。
Copy
Clone に関係する特別なマーカートレイト。このトレイトが適用されていると、所有権の移動が発生する状況において代わりにコピーが行われる。
マーカートレイトとは、メソッドやフィールドを持たないトレイトのこと。これらは型に関する情報をコンパイラに提供し、型の振る舞いを変更するために使われるが、具体的な実装は持たない。
対象の Struct や Enum のすべてのフィールドがスタックに入りきる小さな値(プリミティブ型)の場合に適用できる。ヒープメモリを使う値には適用できない。
Copy は Clone の Subtrait なので、必ずセットでの適用が必要。
手動で Trait を実装する方法
- use 文によりトレイトをスコープに持ってくる
- ただし standard prelude に含まれるトレイトは、use 文を書かなくても使える
- ボイラープレート文を生成する
- IDE の機能に頼るか、ドキュメントの Examples をコピペする
- トレイトを実装する
Default
derive 可能だが、その場合はゼロ値になってしまうので、多くの場合は手動実装が必要となる。use 文は不要。
impl Default for MyStruct {
fn default() -> Self {
Self {
field1: 123,
field2: "hello".to_string(),
}
}
}
let my_struct = MyStruct {
field1: 456,
..Default::default()
};
..
の部分を Struct update syntax という。既存の構造体のインスタンスを基にして新しいインスタンスを生成するときに、一部のフィールドだけを更新する便利な方法。Rust ではよく使われる。
new などの関連関数は、パラメータを受け取ったり、複雑な初期 化処理を行う場合に使われる。Default はデフォルト値を返すだけという点で役割が異なる。
PartialEq / Eq
PartialEq は、2 つの値が等しいかどうかを実際に計算する役割を持つトレイト。比較ロジックは、推移的/transitive, 対照的/symmentric であることが求められる。
Eq は PartialEq の Subtrait かつマーカートレイトである。比較のロジックが反射的/reflexive であることが要件に加えられる。Eq を実装するメリットはあまりないが、ハッシュマップでキーとして使えるようになるなどの利点がある。
- reflexive とは、
a == a
が常に true であること。当たり前に思えるが、例えば NaN は自分自身と等しくない。- transitive とは、
a == b
かつb == c
ならばa == c
であること。- symmetric とは、
a == b
ならばb == a
であること。
impl PartialEq for MyStruct {
// 以下は`(self: &Self, other: &Self)`と等価
fn eq(&self, other: &Self) -> bool {
self.field1 == other.field1 && self.field2 == other.field2
}
}
impl Eq for MyStruct {} // マーカーなのでこれだけでOK
From / Into
ある型を別の型に変換するためのトレイト。From と Into は視点が違うだけで、単方向の変換を行うことに差はない。From を実装すれば Into も自動的に実装されるので、基本的には From だけを実装すればよい。
From<T> for U
Into<U> for T
// -> いずれにせよ T から U に変換される
例えば Struct から String に変換したい場合は、String に From トレイトを実装する。
// [例1]
// 所有権を持つ値を受け取ると消費してしまうので、
// 呼び出し元でStruct全体のcloneが必要となり非効率
impl From<MyStruct> for String {
fn from(my_struct: MyStruct) -> Self {
my_struct.name
}
}
// [例2]
// 参照で受け取って最小限だけcloneするのが一般的
impl From<&MyStruct> for String {
fn from(my_struct: &MyStruct) -> Self {
my_struct.name.clone()
}
}
let my_struct = MyStruct::default();
// Fromトレイトを使う場合 (関連関数)
let s: String = String::from(my_struct);
// Intoトレイトを使う場合 (メソッド)
let s: String = my_struct.into();
Into は以下のような使われ方をすることが多い。このようにすると、文字列に変換できるあらゆる型を引数に取ることができる。
fn show<T: Into<String>>(arg: T) {
println!("{}", arg.into());
}
Making Errors
ライブラリを公開する際などにカスタムエラーを定義することがある。その際、以下の原則に従うこと。
原則 1: エラーは Enum であること
Error トレイトを実装してさえいれば、どのような Enum でもエラーとして扱うことができるものの、あくまで Enum のみをエラーとして扱うことが推奨される。
原則 2: エラーをグルーピングすること
似たようなエラーは Enum の列挙子としてグルーピングせよ。たくさんの列挙子が並ぶとしても、それらが関連しているのであれば躊躇する必要はない。
原則 3: あなたのエラーのみを公開せよ
サードパーティーのエラーを「あなたのエラー」として公開してしまうと、無駄に第三者への依存が生じてしまう。結果として、第三者のコード変更によって公開 API が破壊されたり、内部実装を変えただけなのに公開 API を変更する必要性が出てきたりしてしまう。なので、ラップするなどして自前のエラーとして公開することが望ましい。ただし例外として、標準ライブラリのエラーはそのまま公開したほうが理にかなう場合もあるので、それはそのつど判断する。
原則 4: non_exhaustive にする
non_exhaustive 属性を設定すると、利用側のコードで match などを行う際に、デフォルトのアームを追加することが強制される。これにより、単なる列挙子の追加によって既存のコードが壊れることを防ぐことができる。
原則 5: Debug, Display, Error トレイトを(この順で)実装する
Error トレイトは Debug と Display のサブトレイトであるため、この順で実装することが推奨される。Debug は derive が可能。Display と Error は手動実装が必要なものの、Error についてはコードを書くことは不要。
以上をまとめると、以下のようなコードになる。
use std::error::Error;
use std::fmt::{Display, Formatter};
#[derive(Debug)] // #5: Debugトレイトを実装する
#[non_exhaustive] // #4: non_exhaustiveにする
enum PuzzleError { // #1: Enumにする
WontFit(u16), // #2: グルーピングする
MissingPiece, // #2: グルーピングする
WrongPiece, // #2: グルーピングする
// #3: あなたのエラーのみを公開する
}
// #5: Displayトレイトを実装する
impl Display for PuzzleError {
fn fmt(&self, f: &mut Formatter) -> std::fmt::Result {
use PuzzleError::*;
match self {
WontFit(size) => {
write!(f, "Piece {} doesn't fit", size)
}
MissingPiece => write!(f, "Missing a piece"),
WrongPiece => write!(f, "Wrong piece"),
}
}
}
// #5: Errorトレイトを実装する
impl Error for PuzzleError {}
原則 5b: thiserror を使う
Display トレイトの手動実装が面倒な場合は、thiserror
クレートを使うと簡素化できる。特に理由がなければこちらを使うのがオススメ。前述のコードは以下と等価である。
use thiserror::Error;
#[derive(Debug, Error)]
#[non_exhaustive]
enum PuzzleError {
#[error("Piece {0} doesn't fit")]
WontFit(u16),
#[error("Missing a piece")]
MissingPiece,
#[error("Wrong piece")]
WrongPiece,
}
Handling Errors
おさらいとして、失敗する可能性のある処理を行う関数はResult<T, E>
型を返す必要がある点を思い出そう。Result
は、成功した場合はOk(T)
、失敗した場合はErr(E)
を返す。
ライブラリ作者は可能な限り panic を避けなければならない。エラーが発生した際は Handle or Return するのが原則。Handle はif let
やunrap_or
、unwrap_or_else
などを使ってエラーを処理すること。Return は?
演算子を使ってエラーを返すこと。
サードパーティーのエラーの種類が多岐にわたる場合、「あなたのエラーのみを返す」の原則に沿うのは大変だが、どうするか?Box<dyn Error>
を使う方法もあるものの、デファクトといえるanyhow
ライブラリを使うほうが良い。メリットは以下の通り。
- 多種多様なエラータイプをまとめることでコードがシンプルになる
- コンテキストの付与によりデバッグが容易になる
- エラーが発生するまでのチェーンを分かりやすくたどれる
use anyhow::{Result, Context};
// anyhowのResultは、Errorトレイトが実装されている値であれば何でも受け取れるため、
// エラーの型を明示的に書く必要がなく、成功時の結果だけを型引数として指定すれば良い。
fn get_data_from_file(path: &str) -> Result<String> {
std::fs::read_to_string(path)?
// Contextトレイトをインポートすることで、必要に応じて追加の情報を付与することも可能
// std::fs::read_to_string(path).with_context(|| format!("failed to read file: {}", path))
}
fn main() -> Result<()> {
let path = "data.txt";
let data = get_data_from_file(path)?;
println!("File content: {}", data);
Ok(())
}
Crate という言葉について
Crete には文脈によって 2 つの意味がある。
- 1 番目の意味: パッケージのこと
- e.g.
rand
クレート - e.g. エンジニアが日々作成する、cargo.toml を含むプロジェクト全体
- e.g.
- 2 番目の意味: ライブラリもしくはバイナリのこと
- e.g.
lib.rs
,main.rs
,bin/hoge.rs
といった単位
- e.g.
イメージとしてはこうなる
- package (1 番目の意味のクレート)
- library crate (2 番目の意味のクレート。数は 0 or 1)
- binary crate (2 番目の意味のクレート。数は 0 - N)
Tests
前提として、テストの対象とする関数やメソッドは、通常はライブラリクレートとして独立させておく必要がある。
Rust でコードを書くときの前提として、可能な限りライブラリにすべてを書き、バイナリには最小限のコードを書くというベストプラクティスがある。これは、たとえ公開する予定のない個人プロジェクトであっても準用される。
そうすることで、バイナリのコードは引数を処理してライブラリの関数を呼び出すだけになるので、テスト自体が不要になる。もしどうしてもバイナリのコードをテストしたい場合は、std::process::Command
を使ってテストできる(詳細省略)。
Unit Tests
Rust のユニットテストは、テスト対象と同一コード内に書くのが idiomatic な書き方。
pub fn add(a: i32, b: i32) -> i32 {
a + b
}
#[cfg(test)] // テストコードがライブラリとして発行されないようにする
mod test {
use super::*; // アスタリスクを使っていい、ごく少ない事例です
#[test] // テストランナーで実行すべき対象であることをcargoに伝える
fn test_add() { // テスト関数の名は何でもいい。返値はなしか、もしくはResultである必要がある。
assert_eq!(add(1, 2), 3);
}
}
アサーションに使えるマクロは以下の通り。
assert_eq!()
- 値が等しいことを確認する。PartialEq トレイトの実装が前提。assert_ne!()
- 値が等しくないことを確認する。PartialEq トレイトの実装が前提。assert!()
- bool 値を受け取り、true であることを確認する。panic!()
- テストを失敗させる- ただし
#[should_panic]
があれば、逆に失敗することが成功とみなされる
- ただし
テストを実行するにはcargo test
とする。結果は(前述の 2 番目の意味の)クレートごとにセクションを分けされて出力される。ただしセクションわけのインデントが倒錯していて見づらいので注意。緑の文字があればそこがセクションの始まりであると思えば良い。
テスト関数は Result 型を返すことができる。成功時の型は無視される。失敗時の型 には anyhow の Error を指定することもできる。こうすることで、?
オペレータが使えるようになり、テスト失敗時により多くの情報を得られるようになる。
cargo test test:***
で特定のテストだけを実行できる。ここでのtest:
の部分は前述の自ら定義したモジュールの名前なので注意。
Doc Tests
ドキュメント内に記載したコードをテストできる。cargo test (--doc)
で実行される。ドキュメントと実装の乖離を防ぐためにも有用。
````rust
/// 与えられた二つの数値を足し合わせて返す
///
/// # Arguments
/// * `a` - 1st number
/// * `b` - 2nd number
///
/// # Examples
///
/// ```
/// let a = 5;
/// let b = 4;
/// assert_eq!(9, my_project_name::adder(a, b));
/// ```
pub fn adder(x: i32, y: i32) -> i32 {
x + y
}
Integration Tests
<rootDir>/tests
内にあるファイルは統合テストのファイルとして扱われる。その他はユニットテストと同じ。
// <rootDir>/tests/integration_test.rs
use my_crate::add;
#[test]
fn test_add() {
assert_eq!(add(1, 2), 3);
}
Benchmark
手順
cargo.toml
に所要の設定を追加
[dependencies]
criterion = "0.5.1" # ベンチマークライブラリを追加
[[bench]]
name = "my_benchmark" # `benches/my_benchmark.rs`のファイル名を指定する
harness = false # Rust標準のベンチマーク機能を無効化しておく
<rootDir>/benches
という名前のフォルダを作る。統合テストで使うtests
みたいなもの。- 以下の感じでテストを書く。
// <rootDir>/benches/my_benchmark.rs
use criterion::{criterion_group, criterion_main, Criterion};
use std::hint::black_box;
fn fibonacci(n: u64) -> u64 {
/* なんらかの重い処理 */
n * 64 * 64
}
fn benchmark_fibonacci(c: &mut Criterion) {
c.bench_function("フィボナッチ数列のベンチマーク", |b| {
b.iter(|| {
fibonacci(
// コンパイラの最適化を無効化するために black_box を使うのを忘れずに
black_box(20),
)
})
});
}
// おまじない
criterion_group!(benches, benchmark_fibonacci);
criterion_main!(benches);
cargo bench
でベンチマークを実行する- コンソール出力や target フォルダに生成される HTML ファイルを見て結果を確認する
Logging
ログの機能は標準ライブラリにはないものの、log
という公式ライブラリとして別に提供されており、ログ出力機能の土台となっている。
Rust の標準ライブラリは「永遠に」サポートされる方針のため、採用は非常 に慎重である。
すべてのロギングライブラリは、このlog
を使うべきとされている。
use log::{debug, error, info, trace, warn};
error("エラーが発生しました")
// targetを指定することも可能。指定しなければモジュール名が使われる。
error(target: "俺のすごい関数", "エラーが発生しました")
// printlnのようにテンプレートが使える
error("エラーが発生しました: {}", 12345)
log
はインターフェースを用意しているだけ。出力先は stdout/syslog/file/cloud logging service など色々あるだろうが、必要に応じて適切なライブラリを使う。たとえば、標準出力するだけならenv_logger
という簡素なライブラリがある。
use env_logger;
env_logger::init();
こうしておくだけで、コンソールにログが出力される。ログレベルの指定はRUST_LOG
環境変数で行う。
RUST_LOG=info cargo run
Multithreading / マルチスレッド
Rust のスレッ ドは Mac でも Linux でも Windows でも動作する。スレッドを使うと CPU のコンテキストスイッチ等でオーバーヘッドが発生する点に注意。Disk I/O やネットワーク I/O などの I/O を待つ場合などは、スレッドではなく async / await を使ったほうがずっと効率的である。
スレッドから返す値は Send というマーカートレイトを実装している必要がある。Send トレイトは、スレッド間で安全に移動できる型に対してあらかじめ自動で適用されている。手動実装が必要になった場合はむしろ設計を見直したほうが良い。
use std::thread;
fn main() {
let handle = thread::spawn(move || {
// 子スレッドで何かやって返す
1234
});
// 同時にメインスレッドでも何かやる
// スレッドが完了するのを待ち、結果を受けとる (この場合1234が返ってくる)
let result = handle.join().unwrap();
}
チャンネル
スレッド間で通信が必要なときはチャンネルを使う。チャンネルとは一方通行のキューのことで、あるスレッドが別スレッドに特定の型を持つ値を送付するときに使う。
チャンネルにはcrossbeam::channel
という新しいライブラリを使え。std::sync::mpsc
という標準ライブラリもあるが、これは過去の遺物であり使うべきでない。
チャンネルで扱う型は前述の Send トレイトを実装している必要がある。
チャンネルには bounded と unbounded の 2 種類がある。たとえばchannel::bounded(8)
だと、値は 8 個までしか詰め込めない。いっぱいになると送信側はブロックされ、受信側で値が取り出されるまで待機する。channel::unbounded()
は無限に詰め込める。どれだけ負荷がかかってもメモリが枯渇しないことがわかっている場合に使う。
受信側と送信側はそれぞれ複数になることができる。
チャンネルの流れを双方向にすることもできるが、注意深い設計をしないとデッドロックが発生する可能性があるので、いいアイディアではない。
チャンネルの基本的な使い方 ↓
// チャンネルを作る
// - ターボフィッシュをつけなくとも自動で推論される場合もある
let (tx, rx) = channel::unbounded::<i32>();
// データを送る
tx.send(123).unwrap();
// チャンネルをクローズする
// - 手動で送信チャンネルをドロップすれば受信側も自動でクローズされる
// - 関数が終了してtxがスコープ外になり破棄される場合は、その動きに任せても効果は同じ
drop(tx);
// データを受け取る
for data in rx {
println!("{}", data)
}
チャンネルのより実践的な例 ↓
use crossbeam::channel::{self, Receiver, Sender};
use std::{thread, time::Duration};
#[derive(Debug)]
enum RealLunch {
Sandwich,
Salad,
Soup,
}
fn setup_cafe_worker(worker_name: &str, order_rx: Receiver<&str>, lunch_tx: Sender<RealLunch>) {
for order in order_rx {
println!("🧑🍳 {}: I got an order for {}", worker_name, order);
let real_lunch = match order {
"sandwich" => RealLunch::Sandwich,
"salad" => RealLunch::Salad,
"soup" => RealLunch::Soup,
_ => continue,
};
// ランダムに数百ミリsec待つ
thread::sleep(Duration::from_secs_f32(rand::random::<f32>()));
println!("🥘 {}: I made a {:?}", worker_name, real_lunch);
lunch_tx.send(real_lunch).unwrap();
}
}
fn main() {
// 注文のチャンネル
let (order_tx, order_rx) = channel::unbounded();
// 配膳のチャンネル
let (lunch_tx, lunch_rx) = channel::unbounded();
let workers = vec!["Alice", "Bob", "Carol"];
let mut handles = vec![];
for worker in workers {
let order_rx_cloned = order_rx.clone();
let lunch_tx_cloned = lunch_tx.clone();
let handle =
thread::spawn(move || setup_cafe_worker(worker, order_rx_cloned, lunch_tx_cloned));
handles.push(handle);
}
// 配膳の送信チャンネルはcloneしてスレッドに配り終わっており、クローン元は不要なのでここでドロップしておく。
// そうしな いとプログラムが永遠に終了しない。
// lunch_txもスレッドに渡すようにすればスレッドが終了した時点で自動的にドロップされるものの、
// クローンしたほうがコード的にわかりやすいのでそうした。
drop(lunch_tx);
let orders = vec!["sandwich", "salad", "soup", "sandwich", "salad", "soup"];
for order in orders {
order_tx.send(order).unwrap();
}
// これ以降は注文チャンネルに送信することはないのでドロップしておく。そうしないとプログラムが永遠に終了しない。
drop(order_tx);
for lunch in lunch_rx {
println!("✅ Customer got a {:?}", lunch);
}
// スレッドの後片付けをしないとリークなどが起こる
for handle in handles {
handle.join().unwrap();
}
}
// 実行結果↓
// 🧑🍳 Bob: I got an order for sandwich
// 🧑🍳 Alice: I got an order for soup
// 🧑🍳 Carol: I got an order for salad
// 🥘 Bob: I made a Sandwich
// 🧑🍳 Bob: I got an order for sandwich
// ✅ Customer got a Sandwich
// 🥘 Alice: I made a Soup
// 🧑🍳 Alice: I got an order for salad
// ✅ Customer got a Soup
// 🥘 Carol: I made a Salad
// 🧑🍳 Carol: I got an order for soup
// ✅ Customer got a Salad
// 🥘 Bob: I made a Sandwich
// ✅ Customer got a Sandwich
// 🥘 Carol: I made a Soup
// ✅ Customer got a Soup
// 🥘 Alice: I made a Salad
// ✅ Customer got a Salad