記事一覧
サイズが大きく行数の多いファイルを開きたかった時にテキストエディタをいくつか試してみた
1GB超のCSVファイルを開きたい…
データベースに登録するため、あるcsvファイルの中身を確認する必要がありましたが、普段使っているテキストエディタでは上手く開けなかったのでいくつかテキストエディタを試してみました
ファイルのサイズ:約1.9GB、行数:約7,430,000行
サクラエディタで開いてみる
普段よく使っているサクラエディタで開いてみようとするとしばらく待ったのちRuntim
【AWS Glue】ソースファイル読み込み時のマルチライン指定
※2024年7月時点の情報です
事象
S3に格納されたcsvファイルを読み込みRedshiftのテーブルに登録しようとすると「String length exceeds DDL length」のエラーが発生した
csvファイルを分割するとエラーは発生しない
原因
「Records in source files can span multiple lines」の設定が機能しておらず、複数
【AWS Glue】Visual ETLジョブでRedshiftのnumeric型にデータ登録しようとすると「xxx_decimal(10,2)」カラムが出来てしまう事象に対する対応
やりたかったこと
Glue Visual ETLを使ってS3のcsvデータをRedshiftのテーブルのnumeric型のカラムに登録する
起きたこと
Change Schemaノードを使用してDataTypeを「decimal」に変更してjob実行
→元々あったRedshiftテーブルのnumeric型のカラムxxxには登録されず、新たに「xxx_decimal(10,2)」というカラム
【Power BI】定数線表示のオンオフ切替
Power BIの折れ線グラフなどで表示できる定数線のオンオフを切り替えられるようにしました
※2023.3時点の情報です
STEP1:定数線を表示したいグラフを配置する
今回は折れ線グラフを使います
STEP2:切替用のボタン(スライサー)を作成する
ボタン表示用のテーブルを作成する
テーブル名:Metrics
列1:インデックス(表示順用)
列2:定数線名(ボタン表示用)
ビジ