saekitominaga/w0s.jp-shell

`w0s.jp` サーバーで稼働しているシェルスクリプト

w0s.jp-shell's Issues

Twitter ライブラリを `twitter-api-v2` に置き換える

https://www.npmjs.com/package/twitter-api-v2

「ウェブ巡回（リソース）」のDB更新日時カラムに本来の1000倍の値が格納される

Node.js 関連をディレクトリ分け

/node/ ディレクトリ内に移行する

Applying `@w0s/tsconfig`

[Node.js] fs.xxx や fs.xxxSync を fs.promises.xxx に移行

T/O

Component.ts で import している共通設定ファイル名が先頭大文字のママになっている

これ自体は動作に影響はないが、他ファイルで import を正しいファイル名で行おうとすると ts(1149) エラーになってしまう。

`package.json` の scripts 名精査

`puppeteer-core` v15 系へのアップデート

横浜市立図書館予約連絡の「確認」ボタン自動押下が長らく機能していない

[AmazonAds] 更新があった場合の Json ファイル生成が失敗する

廃止された data.w0s.jp への put のままになっている。

「ウェブ巡回（リソース）」でトップレベル以外の URL の場合にファイル保存が行われない

まどか Twitter ユーザー履歴を廃止

[TypeScript] クラスフィールド精査

Private instance field や readonly 抜けのチェックを行う

[thumbimage] サムネイル画像情報をバッチ処理でファイル生成する機能

SaekiTominaga/media.w0s.jp#2 の対応の一環

「ウェブ巡回（リソース）」の通知メールで変更履歴 URL の末尾のスラッシュは不要

Node.js 18 へのアップデート

コード面では以下の変更が発生

• node-fetch の import を廃止する

Applying `eslint-config-w0s`

DB 操作を Dao クラスに分離

T/O

[ThumbImage] DB に登録された画像削除時に Fetch error で終了する

1. DB に画像が登録される
2. その画像がバッチ処理前にサーバーから削除される
3. バッチを実行すると（対象画像が存在しないので） fetch() で 403 が返る
4. Fetch error で処理が終了する（← 500 などはそれで良いが、 403 の場合は正常時と同じくキューからデータを削除すべき）

「JR 空席確認」機能作成

[AmazonAds] ブログ用 DB が常の同じデータしか更新チェックされない

• 更新日が古い方から N 件のデータについて更新チェックを行っているが、更新がない場合は更新日データ自体が更新されないため、永久に同じデータをチェックし続けてしまっている。
• 更新があった際、 d_info テーブルを更新していないため、 DB は更新されても（次に記事が更新されるまで）画面に反映されない

[CrawlerResource] 保存フォルダ生成がルートディレクトリの時以外エラーで落ちる

mkdir が常にルートディレクトリ（ホスト名）で行われるようになってしまっている。

• 🆗 https://example.com/ → /example.com/
• 🆖 https://example.com/path/to → /example.com/