今日はドキュメントの変更のみでした。
version.h の日付更新。
Enumerable#find, #detect の rdoc 用コメントに省略可能な引数 ifnone が指定されてた時のサンプルも追記しています。 https://github.com/ruby/ruby/pull/2110
version.h の日付更新。
今日は昨日の revert に巻きこまれた変更の再適用と Azure Pipelines 向けの設定修正などがありました。
r67499 で巻き込み revert された r67491 を再適用。
r67499 で巻き込み revert された r67492 を再適用。
r67499 で巻き込み revert された r67493 のうち一部を再適用。このスタイル修正は GC.compact の変更のぶんだけじゃなかったのか。
r67499 で巻き込み revert された r67496 を再適用。
r67499 で巻き込み revert された r67497 を再適用。 [ruby-core:92231] [Bug #15760]
azure-pipelines.yml の Ubuntu 環境での前処理から apt update コマンドの実施を削除しています。 この環境で更新可能な source がなくて(?) エラーになるみたいです。 https://dev.azure.com/rubylang/ruby/_build/results?buildId=363
r67507 の続きで azure-pipelines.yml の Ubuntu 環境で /etc/apt/sources.list を表示してみるようにしています。
r67507, r67508 の続きで Azure Pipelines の Ubuntu 環境で sed を使って /etc/apt/sources.list の deb-src の指定のコメントアウトを外して有効にするようにしています。そして apt-get update を復活させています。
azure-pipelines.yml で displayName: を使ってステップに名前をつけています。また不要になった /etc/apt/sources.list を表示するコマンドを削除。
ISeq をコンパイルする時に rescue 節や ensure 節の例外をセットする特殊変数 $! の ID のテーブルは常に同じなので都度 ALLOC_N() で確保するのをやめてグローバル変数を利用するようにしています。 https://github.com/ruby/ruby/pull/2115
r67511 の追加修正で変数 ID のテーブルサイズを 1 に決め打ちにしてたのを、グローバル変数のテーブル(配列)の要素数を numberof() マクロで取得して使うようにしています。結果は同じですが。
今日はなんとオブジェクトの slot を compaction する GC.compact メソッドの追加、があったのですが CI のエラーで revert されたので最終的に NEWS ファイルの更新のみが残ったという感じです。
NEWS ファイルに行頭にチケット参照の開き bracket がくると rdoc のメタキャラクタになってしまうので改行の位置を調整しています。
同じく NEWS ファイルでコマンドラインオプションの "--" がメタキャラクタとして解釈されるのを防ぐため ++ で囲んでいます。
GC.compact というメソッドを追加して、compaction GC を実行できるようにしています。アルゴリズムの詳細はチケットのほうに ASCII Art による図解と疑似コード付きで説明されているのでそちらを参照。全ての struct RVALUE が動かせるわけではなくて、新しく追加した mark_entry_no_pin() で(のみ) mark したものだけ移動できるようにしているようです。これで heap 減らせるのかなぁ。 [ruby-core:91634] [Feature #15626]
r67479 の新規追加ファイルの svn property 設定。
version.h の日付更新。
r67479 で追加した GC.compact のテストで compaction がおきやすいように生成する一時的な Object インスタンスを2倍生成するようにしています。
r67479 の修正。 Compaction のために拡張ライブラリから参照するクラスは rb_gc_register_mark_object() で明示的に登録しておかないといけなくなったので、拡張ライブラリ json で 追加が漏れていた例外クラスを登録するようにしています。拡張ライブラリは普通の rb_gc_mark() が pin するようになるから大丈夫ってことだったけど、これ拡張ライブラリの互換性が問題になるということなのでは。
GC.compact の導入で weakref のテストがこけたそうなのでデバッグのために assert_nothing_raised をコメントアウトして例外を発生させるようにしています。
ObjectSpace::WeakMap からの参照を pin するようにしています。そして r67484 の weakref のテストのデバッグのための変更を revert しています。なるほど WeakMap からの参照は mark はしないけど pin する必要はあるわけか。
r67479 で追加した GC.compact のテストで1つもオブジェクトを移動できなくてもエラーにせず skip するようにしています。まあ、保守的GCなのでありえるから、ということかな。
構造体 struct RMoved の宣言を include/ruby/ruby.h から internal.h に移動して外部に見せないようにしています。
標準添付ライブラリ net/imap で TLS の SNI が有効になるようにしています。GMail の imap を使うのに必要だったとのこと。 https://github.com/ruby/ruby/pull/2077 [ruby-core:91466] [Feature #15594]
compile.c の iseq_add_mark_object_compile_time() と freeze_literal() で ISeq の mark_ary に要素を追加する時に RGenGC の write barrier を追加しています。
r67489 の変更で rb_gc_writebarrier() の引数の型の違いで警告が出てたので明示的なキャストを追加。
ヘッダファイル timev.h の struct tvm の宣言の前にコメントアウトした状態で struct tvm の空の宣言を追加しています。"for TAGS" とコミットログにあるので構造体宣言がマクロ PACKED_STRUCT_UNALIGNED() の中で行なわれてるので ctags でインデックスが作られないのでその対策ということかな?
parse.y で CompileError の例外メッセージで "p->xxx" みたいにソースコード上の変数名を使って書いてたところをメンバー名だけにしています。コミットログによるとリファクタリング時にうっかりメッセージ内も置換してしまってたようです。
r67479 の GC.compact 追加時の変更部分のスタイルの修正。
同じく r67479 の変更で rb_add_method_iseq で構造体 rb_method_iseq_t と同じレイアウトの構造体を関数内で定義して rb_add_method() に引数として渡してたのを普通に rb_method_iseq_t の変数を定義して使うように修正しています。なんでこんなことしてたんだろ。
id_table.c の rb_id_table_foreach_with_replace() で replace ポインタで渡された関数への第1引数に Qundef を渡してたところを NULL に修正しています。型は VALUE ではなくて ID* で Qundef != NULL なので。
rescue 節で例外を暗黙のうちに保持する特殊変数 $! の ID を defs/id.def に追加して組込みで定義しておくようにしています。
拡張ライブラリ openssl の OpenSSL::BN.new の第1引数に nil を渡すと SEGV してたので StringValuePtr() の呼び出しを if 文の条件部からその前に出すようにしています。 StringValuePtr() はマクロで内部で str 自身を上書きすることがあるから…でも Qnil の時には例外になりますよねぇ。関数の評価の順序のためかな(コンパイラによって違いそう)。 [ruby-core:92231] [Bug #15760]
r67497 のインデントのタブを空白に展開。
r67479 の GC.compact で CI が失敗しているため r67479 から r67496 までのコミットを全部 revert しています。 けど実際には openssl の変更も revert されちゃってるので r67497 も revert されてそう。
であらためてインデントのタブを空白に展開。
svn さんによる version.h の日付更新も revert されたので再度更新されています。
今日は拡張ライブラリ date の JIS X 0301 関係のメソッドの新年号対応や、Module#const_get の不具合修正(?)などがありました。
Module#const_get のテストで参照するための文字列を作るのにクラスの to_s で文字列化して使ってたところを明示的に文字列を指定するようにしています。クラスの to_s してたのでトップレベルのクラス名がたぶん重複していたけど、const_get は正規化して取得できてしまうので(たとえば Object.const_get("Math::Math::Math") で Math が取れる)、エラーにはなってなかったようです。
そして Module#const_get や Module#const_defined? で、ネストした名前でトップレベルの定数が見えてしまわないように修正しています。うーん、これは不具合なのか。 [ruby-core:92202] [Bug #15758]
拡張ライブラリ date の Date.jisx0301 と DateTime.jisx0301 の rdoc 用コメントに年号が省略された時のデフォルトが平成であることを追記しています。
r67397 のあたりで一度入ったけど JIS X 0301 に正式に入ってないからと revert されていた拡張ライブラリ date の Date#jisx0301 や Date.jisx0301 での新年号対応を追加しています。 正式な更新待ってたら遅くなるし他のライブラリなどで略記として R が採用されているのでということで対応を入れてます。 [ruby-core:92071] [Feature #15742]
チケットには "As Japanese government has claimed that only one month is enough for the transition, the new standard will be issued in this month at latest :)" という皮肉なコメントがありますが、Unicode も正式なリリースは 5/1 には間に合わなかったしなぁ。
version.h の日付更新。
NEWS ファイルに Unicode のバージョン 12.1.0 への更新について追記しています。
今日は主に LLP64環境で hash メソッドの返す整数が Bignum の範囲になってしまうと SEGV が発生することがある不具合の修正がありました。
これ本来は hash の整数が範囲を超えても大丈夫になればいいんですけど、それが影響範囲が大きくて難しい(?)ため hash メソッドの実装で Fixnum の範囲に収まるように各個撃破しないといけないというので、新規に追加されたクラスの実装とかで壊れてたのを修正しています。
Enumerator::ArithmeticSequence#hash の戻り値の変換を LONG2FIX() でやってたのを SF2FIX() を使うように修正。 mswin などの LLP64 環境で hash の値が Fixnum の範囲を超えてしまって SEGV を誘発することがある不具合の修正です。 [ruby-core:92190] [Bug #15755]
同様に Method#hash メソッドでも戻り値が Fixnum の範囲に収まってなかったので ST2FIX() を使うように修正しています。 [ruby-core:92191] [Bug #15756]
Range#hash の実装でも同様に hash の値が Fixnum に収まるように修正しています。 [ruby-core:92194] [Bug #15757]
version.h の日付更新。
同様に Struct#hash の実装でも結果が Fixnum に収まるように ST2FIX() を使うように修正しています。メールも検索しましたがこれだけはチケットにはなってないようですね。
今日は一時的なメモリ確保に使う関数の潜在的メモリリークの修正などがありました。
GC 可能な一時文字列バッファを確保するための関数 rb_imemo_tmpbuf_auto_free_pointer_new_from_an_RString() で、ruby_xmalloc() でバッファ確保してから rb_imemo_tmpbuf_auto_free_pointer() を呼んでいたので、ここで大域脱出が発生するとメモリリークする可能性があったので、先に rb_imemo_tmpbuf_auto_free_pointer() で T_IMEMO 型オブジェクトを確保しておいてからメモリ領域を確保してポインタをセットするように修正しています。
VM の debug counters に mjit_exec() 内の処理の出入りのカウンタを追加しています。
version.h の日付更新。
標準添付ライブラリ rinda のテストでタイムアウトエラーが発生した時のデバッグ用のメッセージ出力を追加。バックトレースを出してどこで止まってるのか突き止めるようにしています。
obj_memsize_of() で T_RATIONAL と T_COMPLEX の時に T_IMEMO の処理に fallthrough しちゃってたので break 文を追加しています。2年くらい前に T_IMEMO 型の時に処理が追加された時からこうだったみたいですね。 imemo_type_p() で偽になるから実害なかったのかな。
doc/signals.rdoc のシグナルを処理する Thread についての表記をちょっと修正しています。
今日は tool/downloader.rb の mswin 環境へ対応する修正などがありました。
r67445 の続きで tool/downloader.rb のデバッグのため起動時の引数などを表示するメッセージ出力を追加しています。
tool/downloader.rb で正規表現にファイル名を埋め込む時に Regexp.quote でエスケープしておくように修正しています。
appveyor.yml で make up 時に Unicode ファイルを更新するようにするため UNICODE_FILES 変数の指定を消しています。
r67445, r67446, r67447 の tool/downloader.rb のデバッグメッセージ追加を revert しています。 r67449 で mswin でのエラーは対処できたようです。
version.h の日付更新。
r67441 の Unicode 12.1.0 beta の取り込みで不要になった enc/unicode/12.0.0 ディレクトリ内のファイルを削除しています。 [ruby-core:89260] [Feature #15195]
r67449 の appveyor.yml の変更を revert して、UNICODE_FILES=. が指定されてたら tool/downloader.rb で再ダウンロードせず既存のファイルを使うようにしています。
r67454 の make up 時の UNICODE_FILES=. の指定を msys2 向けのビルド時にも設定するようにしています。これがないと tool/downloader.rb の実行でエラーになるようです。
r67442 でうっかり(?)消されてたテストを復活させています。
MJIT 関連のテストの警告除去。
MJIT のテストで VM 命令ごとにそれを含む compile unit を通すテストで r67442 で追加(復活)した definemethod と definesmethod も追加しています。
