バーストソートで配列を並び替える
バーストソートを使用する
バーストソート (burstsort) は、キャッシュ効率を意識した文字列整列向けのアルゴリズムである。共通接頭辞をトライ木で管理し、まだ細分化していない末尾部分をバケットへ集める。バケットが閾値を超えたら「バースト」して下位桁へトライを伸ばし、小さなバケットだけ挿入ソートなどで仕上げる。
本記事では整数キーを十進桁ごとに扱う簡略版を示す。トライソートと同様に MSD(最上位桁優先)の区分付けだが、最初から木全体を構築するのではなく、バケットが膨らんだときだけ子ノードへ展開する点が異なる。
- バケットへの挿入: 各要素を根のバケットへ追加する。ノードがすでにトライ化していれば、現行桁
d = (x / exp) % 10に従い子へ降り、expを 10 で割って繰り返す。 - バースト: 葉バケットの要素数が閾値
B(ここでは 16、デモでは 4)を超え、かつexp > 0なら、バケット内の全要素を現行桁で 10 分割し子ノードへ再配分する。 - 葉の整列: これ以上桁を分けられないノード(
exp = 0)や、閾値以下に収まったバケットは挿入ソートで昇順にする。 - 収集: 子
0..9の順に深さ優先走査し、整列済みバケットを左から連結して出力する。
procedure burst_sort(A)
if length(A) = 0 then return
maxVal = maximum(A)
exp = highest_digit_weight(maxVal)
root = burst node with empty bucket
for each x in A
burst_insert(root, x, exp)
out = empty list
burst_collect(root, out) // children 0..9, then sort each bucket
A = out
桁数を w とすると挿入と収集はともに O(n · w) であり、補助記憶域は O(n) となる。葉バケットを挿入ソートで仕上げるため安定ソートである。
以下のデモでは 2 桁の整数 20 個の乱数を使い、閾値を 4 に固定している。「シャッフル」で別の並びに差し替えられます。
類似アルゴリズムとの相違点
トライソートは全キーを最初から桁ごとの木へ挿入する。基数ソートの MSD 版と区分は同型で、バーストソートはバケットが閾値を超えたときだけ下位桁へ展開する点が異なる。
計算時間量および空間計算量を計測する
| Size | Average time | Maximum time | Average memory | Maximum memory |
|---|---|---|---|---|
| 256 | 0.000010 | 0.000115 | 82 | 88 |
| 512 | 0.000019 | 0.000090 | 86 | 92 |
| 1024 | 0.000037 | 0.000090 | 113 | 120 |
| 2048 | 0.000073 | 0.000160 | 158 | 168 |
| 4096 | 0.000146 | 0.000273 | 245 | 252 |
| 8192 | 0.000311 | 0.001433 | 341 | 436 |
| 16384 | 0.000646 | 0.001280 | 636 | 672 |
| 32768 | 0.001312 | 0.002226 | 1276 | 1308 |
| 65536 | 0.002764 | 0.011497 | 2543 | 2576 |
| 131072 | 0.006005 | 0.039689 | 5124 | 5156 |
| 262144 | 0.012808 | 0.033667 | 10355 | 10388 |
計測に使用したコードを表示する
set -euo pipefail
WORKDIR="$(mktemp -d)"
trap 'rm -rf "$WORKDIR"' EXIT
cat > "$WORKDIR/Dockerfile" <<'EOF'
FROM rust:1.95.0
WORKDIR /app
RUN mkdir -p src
RUN cat > Cargo.toml <<'CARGO'
[package]
name = "rust-benchmark"
version = "0.1.0"
edition = "2021"
[profile.release]
lto = true
codegen-units = 1
panic = "abort"
CARGO
RUN cat > src/main.rs <<'RUST'
use std::{
env,
process::Command,
time::{Duration, Instant},
};
const MIN_POWER: u32 = 8;
const MAX_POWER: u32 = 18;
const RUNS: usize = 8192;
fn insertion_sort(a: &mut [usize]) {
for i in 1..a.len() {
let mut j = i;
while j > 0 && a[j - 1] > a[j] {
a.swap(j - 1, j);
j -= 1;
}
}
}
const BURST_THRESHOLD: usize = 16;
#[derive(Default)]
struct BurstNode {
children: [Option<Box<BurstNode>>; 10],
bucket: Vec<usize>,
}
impl BurstNode {
fn is_trie(&self) -> bool {
self.children.iter().any(|c| c.is_some())
}
}
fn max_digit_exp(max: usize) -> usize {
let mut exp = 1usize;
while exp.saturating_mul(10) <= max && exp <= usize::MAX / 10 {
exp *= 10;
}
exp
}
fn burst_insert(node: &mut BurstNode, value: usize, exp: usize) {
if node.is_trie() {
if exp == 0 {
node.bucket.push(value);
return;
}
let digit = (value / exp) % 10;
let child = node
.children[digit]
.get_or_insert_with(|| Box::new(BurstNode::default()));
burst_insert(child, value, exp / 10);
return;
}
node.bucket.push(value);
if node.bucket.len() > BURST_THRESHOLD && exp > 0 {
let exp_now = exp;
let items = std::mem::take(&mut node.bucket);
for v in items {
let digit = (v / exp_now) % 10;
let child = node
.children[digit]
.get_or_insert_with(|| Box::new(BurstNode::default()));
burst_insert(child, v, exp_now / 10);
}
}
}
fn burst_collect(node: &BurstNode, out: &mut Vec<usize>) {
if node.is_trie() {
for child in node.children.iter().flatten() {
burst_collect(child, out);
}
}
if !node.bucket.is_empty() {
let mut bucket = node.bucket.clone();
insertion_sort(&mut bucket);
out.extend(bucket);
}
}
fn burst_sort(a: &mut [usize]) {
if a.is_empty() {
return;
}
let max = *a.iter().max().unwrap();
let exp = max_digit_exp(max);
let mut root = BurstNode::default();
for &x in a.iter() {
burst_insert(&mut root, x, exp);
}
let mut out = Vec::with_capacity(a.len());
burst_collect(&root, &mut out);
a.copy_from_slice(&out);
}
fn benchmark_sort(array: &mut [usize]) {
burst_sort(array);
}
fn is_non_decreasing(a: &[usize]) -> bool {
a.windows(2).all(|w| w[0] <= w[1])
}
fn same_multiset(a: &[usize], b: &[usize]) -> bool {
if a.len() != b.len() {
return false;
}
let mut left = a.to_vec();
let mut right = b.to_vec();
left.sort_unstable();
right.sort_unstable();
left == right
}
fn check_correctness_case(label: &str, mut input: Vec<usize>) {
let original = input.clone();
benchmark_sort(&mut input);
if !is_non_decreasing(&input) {
panic!("correctness case {}: output is not sorted", label);
}
if !same_multiset(&input, &original) {
panic!("correctness case {}: elements were lost or added", label);
}
}
fn few_unique_values(size: usize, unique: usize, seed: u64) -> Vec<usize> {
let mut state = seed;
(0..size)
.map(|_| {
state ^= state << 13;
state ^= state >> 7;
state ^= state << 17;
(state as usize % unique) + 1
})
.collect()
}
fn run_correctness_checks() {
check_correctness_case("empty", vec![]);
check_correctness_case("single", vec![42]);
check_correctness_case("duplicates", vec![3, 1, 3, 2, 1, 2]);
check_correctness_case("sorted", vec![1, 2, 3, 4, 5]);
check_correctness_case("reverse", vec![5, 4, 3, 2, 1]);
check_correctness_case("all_equal", vec![7, 7, 7, 7]);
check_correctness_case("skewed_range", vec![1_000_000, 2, 1_000_001, 1, 999_999]);
// Static-buffer Grail skips the in-buffer build when key collection is sparse
// (ideal_buffer = false). Exercising that path catches regressions in buffer gating.
check_correctness_case(
"few_keys_len16",
vec![2, 2, 2, 2, 2, 2, 2, 2, 4, 3, 1, 2, 3, 4, 1, 4],
);
for seed in 0..32 {
check_correctness_case(
&format!("few_keys_len32_seed_{seed}"),
few_unique_values(32, 4, seed),
);
}
}
fn shuffled(size: usize, seed: u64) -> Vec<usize> {
let mut v: Vec<usize> = (1..=size).collect();
let mut state = seed;
for i in (1..size).rev() {
state ^= state << 13;
state ^= state >> 7;
state ^= state << 17;
let j = (state as usize) % (i + 1);
v.swap(i, j);
}
v
}
fn memory_usage_kb() -> usize {
// VmHWM (peak RSS, KiB). Reported memory subtracts a per-size baseline that only
// holds the input array, so the table reflects auxiliary space during sorting.
let contents = std::fs::read_to_string("/proc/self/status")
.unwrap_or_default();
for line in contents.lines() {
if let Some(rest) = line.strip_prefix("VmHWM:") {
let kb = rest
.split_whitespace()
.next()
.unwrap_or("0")
.parse::<usize>()
.unwrap_or(0);
return kb;
}
}
0
}
fn micros(d: Duration) -> u128 {
d.as_micros()
}
fn input_array(size: usize, seed: u64) -> Vec<usize> {
shuffled(size, seed)
}
fn run_baseline(size: usize) -> usize {
let _hold = input_array(size, 1);
memory_usage_kb()
}
fn run_once(size: usize, seed: usize) -> (u128, usize) {
let mut array = input_array(size, seed as u64);
let start = Instant::now();
benchmark_sort(&mut array);
let elapsed = start.elapsed();
let mem = memory_usage_kb();
let expected: Vec<usize> = (1..=size).collect();
if array != expected {
panic!(
"sort failed with seed {} for size {}",
seed,
size
);
}
(micros(elapsed), mem)
}
fn run_baseline_child(args: &[String]) {
let size = args[2].parse::<usize>().expect("invalid size");
let mem = run_baseline(size);
println!("{}", mem);
}
fn run_child(args: &[String]) {
let size = args[2].parse::<usize>().expect("invalid size");
let seed = args[3].parse::<usize>().expect("invalid seed");
let (elapsed_us, mem) = run_once(size, seed);
println!("{} {}", elapsed_us, mem);
}
fn main() {
let args: Vec<String> = env::args().collect();
if args.get(1).is_some_and(|arg| arg == "--baseline-once") {
run_baseline_child(&args);
return;
}
if args.get(1).is_some_and(|arg| arg == "--run-once") {
run_child(&args);
return;
}
run_correctness_checks();
println!(
"| {:>10} | {:>15} | {:>15} | {:>15} | {:>15} |",
"Size",
"Average time",
"Maximum time",
"Average memory",
"Maximum memory"
);
println!(
"|{:-<11}:|{:-<16}:|{:-<16}:|{:-<16}:|{:-<16}:|",
"",
"",
"",
"",
""
);
for power in MIN_POWER..=MAX_POWER {
let size = 1usize << power;
let baseline_output = Command::new(env::current_exe().expect("failed to find current executable"))
.arg("--baseline-once")
.arg(size.to_string())
.output()
.expect("failed to run benchmark baseline process");
if !baseline_output.status.success() {
panic!(
"benchmark baseline process failed: {}",
String::from_utf8_lossy(&baseline_output.stderr)
);
}
let baseline_stdout = String::from_utf8(baseline_output.stdout)
.expect("baseline process returned non-UTF-8 output");
let baseline_mem = baseline_stdout
.split_whitespace()
.next()
.expect("missing baseline memory usage")
.parse::<usize>()
.expect("invalid baseline memory usage");
let mut total_time: u128 = 0;
let mut max_time: u128 = 0;
let mut total_mem: usize = 0;
let mut max_mem: usize = 0;
for seed in 1..=RUNS {
let output = Command::new(env::current_exe().expect("failed to find current executable"))
.arg("--run-once")
.arg(size.to_string())
.arg(seed.to_string())
.output()
.expect("failed to run benchmark child process");
if !output.status.success() {
panic!(
"benchmark child process failed: {}",
String::from_utf8_lossy(&output.stderr)
);
}
let stdout = String::from_utf8(output.stdout)
.expect("child process returned non-UTF-8 output");
let mut fields = stdout.split_whitespace();
let elapsed_us = fields
.next()
.expect("missing elapsed time")
.parse::<u128>()
.expect("invalid elapsed time");
let mem = fields
.next()
.expect("missing memory usage")
.parse::<usize>()
.expect("invalid memory usage");
total_time += elapsed_us;
if elapsed_us > max_time {
max_time = elapsed_us;
}
let aux_mem = mem.saturating_sub(baseline_mem);
total_mem += aux_mem;
if aux_mem > max_mem {
max_mem = aux_mem;
}
}
let avg_time = total_time / RUNS as u128;
let avg_mem = total_mem / RUNS;
println!(
"| {:>10} | {:>15} | {:>15} | {:>15} | {:>15} |",
size,
format!("{}.{:06}", avg_time / 1_000_000, avg_time % 1_000_000),
format!("{}.{:06}", max_time / 1_000_000, max_time % 1_000_000),
avg_mem,
max_mem
);
}
}
RUST
RUN cargo build --release
CMD ["./target/release/rust-benchmark"]
EOF
docker build -t rust-benchmark "$WORKDIR"
docker run --rm --init rust-benchmark