Arrow_Fdwでファイル名の一部を列名として使用する。

[kaigai]

あるArrowテーブルが次のような命名規則で並ぶファイルを読み出すとする。

• 2019_tokyo_sales_record.arrow
• 2020_tokyo_sales_record.arrow
• 2021_tokyo_sales_record.arrow
• 2022_tokyo_sales_record.arrow
• 2023_tokyo_sales_record.arrow
• 2020_osaka_sales_record.arrow
• 2021_osaka_sales_record.arrow
• 2022_osaka_sales_record.arrow
• 2023_osaka_sales_record.arrow

この時、ファイル名のパターンとして $(year)_$(area)_sales_record.arrow みたいのを指定すると、
Arrowファイル本体に year や area という列がなくとも、yearやarea列としてファイル名の一部が参照できるという機能。

これは同時にmin/max統計情報としても利用され、例えば条件句に year >= 2022 が含まれれば、古い年次のファイルは
そもそも読み出さないといった使い方ができる。

「ファイル名の一部」は文字列として切り出せるので、その列名を指定のデータ型に変換できない時は

• エラーにする
• NULLにする
• 無視する（noticeを出す）

という３パターン程度。