Rust で SQLite を再実装した 2023

Database Rust 作ったもの

気合いで実装、どうもかわしんです。この記事は Rust Advent Calendar 2023 の6日目兼情報検索・検索技術 Advent Calendar 2023 の 6 日目です。 Rust で SQLite をフルスクラッチで実装しています。 github.com なぜ SQLite を Rust で再実装しようと思…

2023-11-11

SQLite のおもしろ仕様 (2) : ファイルフォーマット

Database 他人が作ったものの使い方の解説

後方互換性って辛いね、どうもかわしんです。最近 Rust で SQLite をフルスクラッチで再実装しています。 github.com 再実装するために SQLite の公式ドキュメントやソースコードを読み込んでいるわけですが、その過程で気付いたおもしろポイントを共有しよ…

2023-09-23

天下一 Game Battle Contest 2023 に参加した

参加記 Go

予習は大切、どうもかわしんです。「天下一 Game Battle Contest 2023」に参加しました。4位でした。 tenka1.klab.jp 去年このコンテストの存在をちょうど終了した時に知ってやりたいなと思い、Twitter アカウントをフォローして1年待ってました。今回の大…

2023-09-09

SQLite のおもしろ仕様 (1) : データ型

Database 他人が作ったものの使い方の解説

型は型、どうもかわしんです。SQLite では型は絶対ではなく、あくまでも尊重です。信用しすぎると裏切られます。最近 Rust で SQLite をフルスクラッチで再実装しています。 github.com なるべく本家の SQLite と compatible にするために SQLite のドキュ…

2023-09-02

SQLite を再実装する時に役にたつドキュメント

Database 他人が作ったものの使い方の解説調査

困った時はドキュメント、どうもかわしんです。最近、諸事情で SQLite のドキュメントを読んでいます。前回の記事で紹介した通り SQLite を Rust で再実装しています。おかげさまで 300 を超える Github Star もいただき嬉しいです。 github.com SQLite は…

2023-08-05

Rust で SQLite を再実装している

Rust 作ったもの Database

セキュリティを盾に一点突破。どうもかわしんです。最近 Rust で SQLite を実装してます。以前の記事で HTTP Parser を Rust で実装しようとしたものの、すでに実装されていたので断念しましたが、いい題材を見つけました。SQLite です。開発中のリポジトリ…

#Rust #SQLite

2023-04-05

AI とソフトウェアエンジニアの未来予想

ポエム

キャリアの危機。どうもかわしんです。この記事の内容は全て僕個人の意見であり、所属する組織を代表するものではありません。最近周りで ChatGPT が話題です。特に GPT-4 が出てきたあたりからの Twitter で観測する人々の騒ぎ方をみるにこれまでとは何か…

2023-01-09

The fastest HTTP parser of Rust

Rust 調査

速さは正義。どうも、かわしんです。 Rust で一番速い HTTP パーサーは C で書かれた picohttpparser の Rust バインディング、picohttpparser-sys です。ガハハ。 $ RUSTFLAGS="-C target-feature=+sse4.2" cargo +nightly bench Finished bench [optimized…

2022-12-04

SIGSTOP シグナルは EINTR を発生させるのか

Linux OS C

エラーハンドリングはヌケモレなく、どうもかわしんです。ちゃんとエラーハンドリングしてますか？以前のブログでも書いた通り、プログラミングする以上発生しうるエラーのうち回復可能なエラーは必ずハンドリングするべきです。 kawasin73.hatenablog.com …

2022-11-21

OS はキャッシュのライトスルーを選ぶのか

OS 疑問

メモリとキャッシュと整合性。どうも、かわしんです。最近「詳解 LINUX カーネル」という分厚い本を読んでいるのですが、割と序盤の第 2 章で気になったことがあったので調べてみました。ライトスルーとライトバックご存知の通り、CPU にはキャッシュがあ…

2021-05-15

新しい技術を追わない

ポエム

時代はワークライフバランス。どうもかわしんです。新しい技術は追わない。これは僕の個人的な方針です。別に最先端を追い続けることを否定するわけではありません。ここでいう新しい技術は、web 界隈の新しいフレームワークとかライブラリとか SaaS とか…

2021-04-04

新卒で入社して1年が経った

ポエム

お久しぶりです。どうも、かわしんです。前回の投稿から丸々1年が経ったのでブログを投稿したいと思います。 1 年間何をしてたのか 1 年前、新卒として某外資系 IT 企業にソフトウェアエンジニアとして就職し、それから某 Android アプリを開発するソフトウ…

2020-04-01

原因不明のエラーなどない

ポエム

お前のいう想定外はただの調査不足。どうも、かわしんです。新年度が始まり周りのみんなは働き始めているのを感じますが、僕は4月6日入社なのでもう少しモラトリアムを満喫します。さて、去年開催された GoCon 2019 Spring で「エラー設計について / Design…

2020-02-10

失敗した AWS Batch ジョブを Slack に通知する (Terraform を使って)

他人が作ったものの使い方の解説

サーバーレスでピタゴラスイッチ。どうも、かわしんです。イベントをサーバレスで繋げてピタゴラスイッチを作るのって案外楽しいもんですね、GUI コンソールで作ってる限りは。さて、今回は AWS Batch のジョブ実行が失敗した時に Slack に通知する機能を作…

2019-12-15

SQS を使った Python の非同期ワーカーは ndkale しかない

Python 他人が作ったものの使い方の解説

誰一人見捨てない!!! どうも、かわしんです。Celery は見捨てるんです。この記事は Pythonその2 Advent Calendar 2019 の 15 日目の記事です。やや強めのタイトルですが、AWS SQS を使った非同期ワーカーでまともな実装は ndkale しかないという内容です。…

2019-12-14

golang.tokyo #28 で登壇して賞品をいただきました

Go 参加記

限りある時間を大切に。どうも、かわしんです。情報洪水の現世をスマートに生きていきましょう。さて、去る 12 月 4 日に開催された「golang.tokyo #28 ~年末だよ！Go大忘年会&LT大会！~」で LT をしてきました。 golangtokyo.connpass.com 発表資料はこ…

2019-12-06

Go でトランザクションをフルスクラッチで実装した

Go Database 作ったもの

一歩ずつ一歩ずつ前へ進んでいく、確実に。どうも、かわしんです。到底 1 記事に収まるような内容ではなく長いので、トランザクションの作り方に興味のない方は途中の「なぜ Go なのか」まで読んでいただければ嬉しいです。この記事は、Go2 Advent Calenda…

2019-11-27

Go で昇格可能な RWMutex を実装した

Go Database 作ったもの

順番は守りましょう。どうも、かわしんです。トランザクションを実装中です。さて、先日トランザクションの並行制御アルゴリズムである「S2PL (Strict Two Phase Lock)」を実装した 1 のですが、Read オペレーションでは Read Lock を取った後にすぐに解放…

2019-11-25

Go : Mutex は channel の 4 倍速い

Go

速ければ速いほど良い。どうもかわしんです。トランザクションを実装中です。トランザクションの並行処理で S2PL (Strict Two Phase Lock) を Go で実装しようとしているのですが、どうしても昇格可能な Reader Writer Mutex が必要になり、Github にいい実…

2019-11-22

MySQL は Rigorous ではない

Database

トランザクションは慎重に。どうも、かわしんです。今トランザクションを実装しています。タイトルは釣りです。MySQL のデフォルトのトランザクション分離レベルである REPEATABLE READ での話です。後、確かめた訳ではないですが MySQL に限った話ではない…

2019-11-16

WEBエンジニア勉強会 #15 で登壇しました

参加記 Python

プログラマーあるある、なにかと独自のミニ言語を作りがち。どうも、かわしんです。昨日、11 月 16 日に開催された WEBエンジニア勉強会 #15 の LT 10 分枠で「ネストした JSON を CSV に自動変換する Python ライブラリを作った」というタイトルで登壇して…

2019-11-10

メモリアロケーションに対する罪悪感

ポエム Go Python

いつも心に省メモリ。どうも、かわしんです。今日はメモリアロケーションについてのポエムを綴ります。さらっと流してください。ちなみに、ここでいう省メモリとはメモリサイズだけの話ではありません。メモリをアロケート（確保）するとき、あなたはどん…

2019-10-28

ネストした JSON を CSV に自動変換する Python ライブラリを作った

作ったもの Python

プログラマーあるある、なにかと独自のミニ言語を作りがち。どうも、かわしんです。どうしても簡潔にやりたいことを表現するためにミニ言語つくりがちですよね。JSON で構文作ると長いし。さて、ACES Inc. という東大の松尾研究室発の AI ベンチャーがある…

2019-10-17

GitHub Actions Meetup Tokyo β で登壇しました。

参加記

先頭を駆くる者には落とし穴ハマっては埋めハマっては埋めどうも、かわしんです。昨日サイボウズ株式会社で開催された「GitHub Actions Meetup Tokyo β」という非公式の Github Actions の勉強会で LT をしてきました。 gaugt.connpass.com 発表スライ…