暖かくなってきたし、管理釣り場に行ってみよう、ということでキングフィッシャーというトラウトやバス釣りが楽しめる管理釣り場へ。ルアー釣りをやったことがなかったので、そもそもキャストがうまくできず、糸はこんがらがるわで一時間ぐらいあれこれやって意気消沈。

通りかかったスタッフに管理釣り場、というかルアー釣り初めてなんですけど〜と声をかけると、丁寧に基礎から教えてくれ、自分が持ってないルアー（というかスプーン数種類しか持っていなかった）を数種類持って来て貸してくれたりと、至りしつくせり。初心者に釣りの楽しさを知ってほしい感じが伝わって来てありがたかった。

徐々にコツを掴んで、キャストもできるようになったり、ルアーを変えて活性を見るなども少しずつわかって来た。ルアー変えまくるの、何が楽しいのかと思っていたけど、自分でやると状況を考え取捨選択する要素がゲーム感覚で楽しい。最終的に10匹ぐらいキャッチ＆リリースして終了。3時間券だったけど、あっという間にスギてしまった。次はクーラーボックス持ってきて、釣った魚を家で食べたい。

---

図書館みるるのWiFiは公衆無線WiFiでよくあるアカウントログインが必要。様々なOAuthプロバイダに対応していて良いのだけど、iPadではwebviewでログイン画面が出るためにCookieが存在せず、毎度ログインする必要がある。

この仕組み、よく知らなかったのだけどCaptive Portalというらしい。Appleのデバイスなら、http://captive.apple.com/hotspot-detect.html にアクセスしてリダイレクトが発生した画面をwebviewで表示してるぽいので、Safariから直接このURLにアクセスすれば認証画面が出る。これでいちいちログイン情報入れずに1クリックで認証できるようになった、便利。

---

夜はみるるに行く前に丸信本家でチャーシューメンネギダブルで。最初に食べた時、正直ふつうな味だなぁと思ったのだけど、もう3回目。一回じゃわからなかった良さがあって、時たま無性に食べたくなる。3分ぐらいでラーメンが出てくるのささっと食べれて嬉しい。

iPadのみで完結しそうなタスク(主にbigquery書く業)が溜まっていたので、野外やカフェで iPad + Magic Keyboardで作業をする。redashはiPadのSafariではちょくちょくキーボード操作の挙動がおかしくなって(iPhoneのSafari向けの処理が適用される？)割と辛い。GCPのWeb上のBigQuery Consoleは挙動は問題ないのだけど、Web UI上のHTMLでレンダリングされているタブをCommand + W で閉じようとしてしまい、ブラウザタブをうっかり閉じてしまうミスが多発してしまった。

せっかく外で作業するので、使わなければ月0円運用でき330円で24時間回線使い放題プランが有るAUのpovo 2.0に加入して使ってみる。物理SIMに楽天モバイル、eSIMにpovoをと思ったのだけど、iPadではpovoを使う際にAPNプロファイルの適用が必須なようで、物理SIMの楽天モバイルに戻した際にAPNプロファイルを削除する必要があり、またeSIMのpovoに適用した際に再度APNプロファイルのインストールが必要になったりと手間がかかるようだ。iPhone(+iOS 15)ならAPNプロファイルを入れる必要がないようなのだけど。

使ってみた感じiPadの作業なら動画でも見ない限りは24時間使い放題はオーバースペックで、SIM切り替えの煩雑さを考えると、複数SIMでの運用を止めてIIJのギガプランを使ったほうが良い気がしている。

野外は風が強く、風よけが無いと辛い感じだった。やはりタープが必要そうだ。

---

気になっていたラーメン屋、華久で鶏白湯ラーメン。店員さんがこれでもかというくらい丁寧な対応で恐れ多い。久しぶりに鶏白湯を食べたなー、引っ越し以降初な気がする。那須では貴重だ。

---

ベクトル・行列からはじめる最適化数学読み進めは16章の制約付き最小二乗法。Ax + bの最小二乗解を求めつつ、Cx = d という制約を満たす条件の物を解く。15章でやった、多目的最小二乗法の問題として考えることができる。制約の例では区分多項式だったり、Cx が合計予算だとすると、その予算において最適な最小二乗解を求めることができる。16.2では解法を、16.3では実際に制約付き最小二乗法を解く実装を解説している。

苦土石灰をまいて再び耕す。徐々に中和されていくのを待つため、植え付けは一週間後ぐらいかな。鍬大活躍。

---

萌芽が始まるとともに、庭に色々と植物が生えだす。見たことがない新芽は知識がないので雑草かどうか見分けがつけず、Google画像検索にかける。たとえばこの植物はヤブガラシ（雑草）のようだ。根っこが地中深くうまり、ほって置くと大変になるらしい。

---

小説同志少女よ、敵を撃てを読む。時事的なこともあいまって、2022年本屋大賞を受賞したらしい。ラノベ的な感じでサクサクと読みやすく一気に読んでしまった。登場人物たちのビジュアル(表紙絵以外は絵としては一切出てこない)が、沙村広明氏が描くキャラとして自分の脳内で保管されたのも面白かったな。

---

ベクトル・行列からはじめる最適化数学読み進めは15.3の逆問題(inverse problem)。y = Ax + bの最小二乗解ではなく、b = Ax - y という問題を考える。説明例では、周期データ（例では24時間の時系列データ）をデータフィッティングする際に、周期成分は緩やかな方が望ましいと仮定しそれを正則化項(=副目的関数)として考える。その正則化項が強ければ、周期成分は緩やかになるが、主目的関数の最小二乗値は悪くなる。ただこれは、過剰適合を防いでいるとも言えるであろう。逆問題は色々なことに応用でき、例えば画像のボケ成分(上下左右の画素の差の二乗)の除去などにも適用できる。

15.4正則化付きデータフィッティング。過剰適合を防ぐため、f(x)の変動に敏感にならないように目的関数を作って求める。正則化がl2なら本書で扱っているリッジ回帰、l1なら本書では扱ってないがラッソ回帰。

15.5計算量。リッジ回帰の計算量を減らす方法として、グラム行列をキャッシュして再計算時に使い回す方法とカーネルトリックがある。カーネルトリックを用いることでm > nである場合、n x nサイズの逆行列を求め計算することで圧倒的に計算量を下げることができる。カーネルトリックはWikipediaによると

カーネル関数は、特徴空間中のデータの座標の明示的な計算を経由せずに、特徴空間における内積をデータから直接計算する手段を与える。内積を評価するためにカーネル関数を使うと、明示的な座標の計算を経るよりもしばしば計算量が少なくて済む。カーネル関数を使って、計算複雑度の増大を抑えつつ内積にもとづく解析手法を高次元特徴空間へ拡張するアプローチを、一般にカーネルトリックと呼ぶ。

なるほど。今までカーネルトリックはSVMで使わてるアレ、ぐらいのイメージだったけどもうちょっと理解が進んだ。

そろそろ家庭菜園でも始めてみようか、と本を読む。苗を買ってきて植えればオッケー、というものでもなく、前準備として土を耕し苦土石灰などで日本の酸性土壌を中和し中性土にすると良いらしい。この家は以前住んでいた方が家庭菜園にしていた場所があり、まずはその場所の草を抜き鍬を入れる。あとは苦土石灰を買ってきて混ぜれば良い感じかな。

ナスやミニトマトを育てたいが、以前どんな物を育てていたかで連作障害が起きるという。さすがに何をどの場所で育てていたかはわからないので、発生しなければよいのだけど。

---

近隣散歩。田んぼへの水入れ時期で、景色がまた変わる。突然水上に村が出来上がったかのような景色で面白い。カエルも元気に鳴き始めているのだけど、水入れが始まったばかりなのにどこからやってきたのであろう。今産卵して、夏が合唱本番という感じなのだろうなぁ。

良い天気だなーと、赤沼せせらぎ公園にイスとテーブルを持っていってぼーっと過ごす。山も川も見え、見え田畑・森林に囲まれ、水道もトイレも有り、公園は広くて土日だけど人口密度は低い。居る人は各々好きに過ごしている少人数キャンパー。チルスポットとしては最高感あるなぁ。

ちょっと風があって、日差しもこれからのシーズン強くなるであろうから、タープが欲しくなる。

昨日に引き続いて寒い日。日中、近所の工事が非常に大きい音で集中できず、図書館みるるへ。無料WiFiもあるし、集中部屋もあるし、作業机がたくさんあるので気分を変えるのにちょくちょく移動できるし、コーヒー屋（モリコーネ）も図書館内部にあるし（蓋付きなら館内どこでも飲んで良い）、とても良い環境。難はビデオチャットができないことぐらいか。モリコーネでは球根ごとチューリップをディスプレイしていた。

---

これは昨日食べたアップルパイ。

---

ベクトル・行列からはじめる最適化数学読み進めは15章多目的最小二乗法。15.1, 15.2の制御まで。多目的最小二乗法はAx + b 一つではなく、複数の式で最小化する。互いに相反するので、目的に応じた係数で必要な妥協・妥当ラインを求める。例では、複数エアコンを利用して温度を均一に保ちたいが、それらにかかる電力消費量もなるべく下げたい、バランスの良い係数は何か、など。

昨日より最高気温が15度ぐらい低く、だいぶ寒い一日。寒暖差があるからそう感じてるだけで、2・3月にくらべたらこれでもだいぶ暖かいのだけど。

---

冬に球根を植えたチューリップが数日前から咲き出す。穴ほって植えるだけ（簡単といいつつも、ほぼ妻がやってくれたのだが…）で咲いて偉い。寒かったり明け方や曇りの陽が出ていない時は花が開かず、暖かく陽がさすと花が開く。健気な感じが微笑ましい。

---

芝桜の花びらも色々なタイプがあるなぁ。これは白とピンクのブレンド。

---

ベクトル・行列からはじめる最適化数学読み進めは14章、最小二乗識別。2クラス分類と多クラス分類を最小二乗法で行う方法の解説。多クラス分類は二クラス分類をN種分やってargmaxをとるのだけど、N種やるのは計算機効率が悪いがQR分解した結果を使いまわすことで大幅に計算量を削減できる。もしくはワンホット化した値を使う。

機械学習では通常2クラス分類は0,1を当てるのだけど、この本ではわかりやすくするために-1,1を使っていてなるほど。0,1なら0.5が中心だが、-1,1で0が中心のほうが理解しやすいなぁ。softmaxも使わず、シンプルで分かりやすい解説。

章の最後に、ランダムな値を作って説明変数の積をとったものをmax(0, x)な、いわゆるReLU関数に通して非線形化して特徴量を水増しする。この水増し特徴量を加え、最小二乗法でクラス分類すると、水増し前は約86%の正解率が、水増し後は95%強ほどになってえっビックリ。自分でも書いて試して腑に落ちた、なるほど線形関数では結局特徴表現は変わらないので、非線形化することで意味のある特徴になるのか。なお非線形化しないと、正解率はほぼ変わらない。

ついでに最小二乗解の計算に結構時間がかかっていたので、numpyからjaxに書き換えて試す。ほぼnumpyママ動くし、colabのGPU上で超簡単に動かせて、numpyなら24秒ほどの処理が1-2秒ほどに。3分ぐらいの処理は20秒ほどに。おおお、jaxいいじゃん。こういうやつが欲しかった。

先日車で通ったとき、山あいに沢山の桜があってここは何だろう？と後日調べると芦野氏陣屋跡（芦野御殿山公園・御殿山）という場所らしい。芦野氏の屋敷（居城）跡で、桜ヶ城とも呼ばれるぐらい桜が見事とのことでなるほど。すぐ手前の隈研吾建築である石の美術館は有名だけど、この芦野氏陣屋跡なんて存在自体全く知らなかった。

---

入り口には稲荷神社。御殿山を登ると見晴らしが良い休憩所があり、芦屋～茶臼岳(たぶん)を一望できる。ちょうど桜は散り始めて、それもまた良かったな。

---

中腹にある樹齢500年のコウヤマキ。ご立派。

山を登っているお年寄りは結構いらっしゃったが、全体的にほとんど人はおらず、桜と景観を堪能できた。周りも芦野の自然あふれる良い場所で、また違う季節に来たい。お気に入りの場所が一つ増えた。

---

お昼は伊王野山の駅で水車蕎麦。暑い日のため、蕎麦屋は大変賑わっていた。外のテントの下で食べたのだけど、春の陽気が最高の調味料という感じで、大変美味しくいただけた。

---

その後はgarden AUX PARADISへ。かつて無いほどの混み用で、店内には入らずテイクアウトでジェラートを頼む。はじめはここでランチをと思っていたけど、混みそうな予感がしたので水車蕎麦で正解であった。

春のPARADISの敷地は花々に囲まれもう最高という感じで言うことなし。店の周りを散歩している人は少なく、なんとも勿体ない。

---

暖かいを通り越して汗がでるような日が続いたので散髪へ。約一ヶ月半ぶりでサッパリ。いわゆるスピードカットなのだけど、予約アプリがこのお店にはあり、予約できるのが便利なのだよなぁ。今日など予約なしなら100分待ちであった…。

---

ベクトル・行列からはじめる最適化数学読み進め。13.2の検証では汎化性能・過学習・ホールドアウト検証・交差検証の説明など。この辺は機械学習の一般的な話なので復習的な感じ。

13.3の特徴エンジニアリング。標準化・例外値削除・ワンホット化・特徴同士の積（バイナリなら両方1のもののみが1としてのこるなど）・一般加法モデル（特定の閾値以上で線形関数を適用するといった非線形モデル）・層別モデル（特定クラスタで別モデルを適用する）という一般的なものの説明。高度なものとして、たとえば文章ならTF/IDFといったドメイン特化な特徴追加・他のモデルの予測値を使う・クラスタリングしたグループ代表からの距離・元の特徴からランダムな線型結合する非線形関数を適用といった説明。

ニューラルネットワークの学習は特徴エンジニアリング視点から一言で表すと、線形関数と非線形関数を組み合わせることで、巨大なデータがあれば良い特徴写像を直接見つけることができる特徴量（NNにおいてはパラメータ）作成と言えるであろう。

この節は「新しい/より良い特徴量を作れました」という一般的な話だけでなく、RMSを見てその特徴がどれだけ寄与しているのかや、追加しても訓練・テスト結果のRMSがちょっと良くなる程度の特徴はよろしくない、等を知ることができる。また人間が解釈しやすい最小二乗法とRMSから試して、徐々に複雑なことをやっていくことが大切という至極まっとうな手法を理解できる。示唆に富んだ節だったなぁ。

花粉が多いのか、朝から鼻がヤバい警報。昨晩も一日一錠で効く鼻炎薬を飲んだのだけど、追加で今朝も飲んだが、効き目はあまりなく日中ティッシュが手放せない一日であった。この辺はヒノキ花粉が多く飛んだ日らしく、スギよりもヒノキ花粉に弱いのかもしれない。

---

隣県白河市の南湖公園に行き、南湖を周遊散歩しながら桜を見る。暖かくてほんと良い日だなぁ。と、歩いていると、自転車に乗ったH氏に遭遇。えーびっくり、こんなところで！H氏は自転車で色々なところを巡っているので、ばったり会うことがある、という噂は聞いていたのだけど、自分達も会うとは。ただでさえ心地よかった散歩が、思いもかけない出会いで更に楽しいものとなった。

---

休憩はSHOZO SHIRAKAWAで。いちごのレアチーズケーキが、のっているイチゴやホワイトチョコと食べると絶妙なバランスでおいしい。SHOZOのそばの団子屋ではソフトクリームぜんざい的な物も売っていて美味しそう、今度食べてみたい。

---

つづいて白河の小峰城跡地へ。311震災で石垣が崩れ落ちてしまったらしいのだけど、いまは復旧して何より。城跡地の高台をぐるっと桜が囲んでいて、こちらの桜もきれいであった。高台からは白川が見渡せる。また高見櫓は再建されたようで中を登ることができる、結構立派だ。学生の一行や、お年寄りの御一行もバスなどで訪れており、楽しい賑やかさ。

---

遅めの昼食は、白河手打ちラーメンあずま食堂で。店内はリニューアルしたのかオシャンティで、店員さんも至極丁寧。美しいラーメンのビジュアル、ついつい食べすぎてしまった。毎度うっかり食べすぎて体調を崩しているのだけど、いつになったら昔と違ってそんなに体は食べられないんだよと学習するのだろうか。というかアンラーニング（昔はたくさん食べれたことを忘れる）できるのであろうか。

---

帰り道は芦野温泉へ。久しぶりの薬湯は染み入る。

---

ベクトル・行列からはじめる最適化数学読み進めは13.1最小二乗データ当てはめの残りをやる。なかなかの長さの節だった。最小二乗法をただの線形回帰として当てはめる話は、どの機械学習初学者本にでる当たり前の話なのだけど、行列の特性をわかっていれば例えば周期的なデータ（例では12ヶ月周期のデータ）ではその周期の単位行列を作って縦方向にスタックし最小二乗法を適用することで、周期ごとの重みを出した上で当てはめができる。N次多項式ではヴァンデルモンド行列を使い、係数を求める。分割点があるようなデータに対しては、区分線形関数を最小二乗法当てはめとして解く。

自己回帰モデル(ARモデル)を当てはめる例では、ロサンゼルス国際空港の気温の予想を直近8時間の数値から線形関数のパラメータをガッと出して最小二乗法に当てはめる。なるほど、最小二乗解をガッと出すだけでパラメータを求められるのは面白いなぁ。ガット出せるので、直近M個の数値を変えて最適なRMSを求める、というのも簡単にでき、例えば例のロサンゼルスの気温では直近のM=8なら予測点が736個でRMSは1.013だが、M=100なら予測点が644個で0.761、M=400なら予測点が344個でそれに対してのRMSがほぼ0となる。つまり直近400時間分の気温がわかっていれば、次の一時間の気温はこのデータに関してはほぼ当てられるが、これはまぁ過学習ですね。

他にも自己回帰モデルは時系列データを考察するのにいろいろと使えそうで面白いなぁ。Wikipediaの項目を見ると、今回当てはめた自己回帰モデルはユール・ウォーカー方程式というやつなのか。

最後に従属変数（目的変数）の対数化の話で、相対誤差を最小にしたいなら対数化する、絶対誤差でみたいならママ使うといった話。この節も色々と為になるし面白かったなﾜｧ～。

仕事部屋が昨日買ったスイセンと桜の花で満ちていて良い香り。スイセンはジャスミン・金木犀のような香りなんだね、好みの香りだ。

---

冬タイヤ履き替えのためイエローハットへ。サラッと終わるかと思いきや、以前付けていたタイヤはイエローハットの整備基準では不良だからここでは付けられないと言われ、新品タイヤを買うか持ち帰ってくれと言われる。こないだ車検通ったばかりなのに、なるほどそういう販売方法もあるのか～と勉強になった。持ち帰るのも面倒だし、次回の車検では通らない可能性もあることがわかったので、勉強代と思い新しいタイヤに変更。車関連は無知なので、こんなところにも費用がかかるのかと、思わぬところで出費がかさむ。

車は人生で数回ぐらい買い替えそうだから毎度知識が溜まりそうだけど、人生で1回買うかどうかの家は、何も考えずに中古住宅を買ったりすると大変なことになりそうだ。

---

昼食はプティレストランPotironでコルドンブルーを。初めて目にするコルドンブルーという料理は、ホワイトソースを豚ロースで挟んで揚げたカツにジャバジャバのソースがかかっていて非常に好みの味。定年退職後にお店を開いて14年、というもの優しいご高齢のご主人が今日は一人でお店を回していて大変そう。お話を伺うと、おいしいと言ってもらえることが嬉しくてレストランを続けている、チーズフォンデュが名物でとても美味しいから今度食べてね、と言われ、またチーズフォンデュを食べに来たい。

---

その後は那珂川河畔公園へ。早めに咲いた桜は散り始めていて葉桜に、時折風が吹くと花吹雪。暖かく気持ちよく散歩できた。はー最高。木蓮や河畔のしだれ桜も綺麗であった。

---

先日前を通りかかったら屋台が出ていて気になった、高久愛宕山公園でも散歩をする。今日も3軒ほど屋台が出ており楽しそう。丘になっているからか、桜はもうだいぶ葉桜になってしまっていて、もう数日前が見頃だったのか。この公園はGoogle Mapsにもほとんど情報がないのだけど、丘の上の高久神社まで車で行くことができる。丘からの眺めもなかなか良いし、ほどよく散歩できるので、今後もちょくちょく通いたい。良い場所。