AIプログラミング

こんにちはバグ出しも終わり、Windows・Linux共にVirusTotalでのウイルスチェックもOK。Windows版は更にマイクロソフトへファイルを送り審査待ちとなっています。Windowsでの安全性が確認が取れ次第、Aimeck15_v1.3.5のリリースとなります。早ければ今日中、遅くとも明日にリリースできるかと思います。■v1.3.5の主な新機能・アップデート内容【録画機能の大幅刷新とRPA強化】・録画の高速化とスマート分割機能録画処理を高速化し、一連の操

タイトル：Aimeck15Linux版でVRAM直撮りこんにちは！昨日の記事で書いた録画機能の高速化ですが、Aimeck15がWindows・Linux(X11)のマルチプラットフォームゆえ、互換性のために泥臭いコードを書いていたのが原因でもあるのです。録画時の実際のコードは、録画するアプリ上に透明なアクリル板を作りその上にピンとアクション名を描画し、スクリーンショットを撮る瞬間にアクリル板を非表示にしてピンが映らないように撮るという非効率なロジックだったのです。Windows

タイトル：Aimeck15v1.3.5録画機能の大改修！皆さん、お久しぶりです！気になってしまった「録画のもっさり感」からの大改修Aimeck15ｖ1.3.5リリース目前ということでWindowsでビルドしてテストしてたのですが「うん？Windowsの録画機能がもっさりしてる・・・」と気になり始めて、リリース直前でよせばいいのに同期処理を非同期処理に変更しました。すると今度は、処理が速くなりすぎ画面遷移中の画像でオートスプリット（画面遷移で自動シーン切替）が過剰に反応する

タイトル：Aimeck15v1.3.5の土台が完成しましたこんにちは！メインUIのデザインがほぼ完成しました。操作性を極めたメインUIと画像ツリーの刷新アクション項目編集欄をプレビュー上側に移動して、ユーザー様が違和感の無いように変更しました。私もこの画面構成が一番しっくりきます。上側にアクション項目編集欄を移動したことで、1画像＝複数アクションが登録されているものと、1画像＝1アクションのクリック設定が違和感なく設定できるようになりました。UIのバランス的にも落ち着いた感じです。ま

タイトル：Aimeck15v1.3.5のマルチアクションエディタの改良ゆっくり録画させてよ〜！皆さんRPAで操作録画時に「急いで録画しなきゃ」となりませんか？ゆっくりした操作で録画してしまうと当然再生時もゆっくりになってしまいますので、最短最速で録画したいものです。しかし緊張してミス連発で再録画・・・私にとって通常の挙動ですよ、手汗びっしょりでマウスが可愛そうなくらいです。こだわったのは「急がせない」人に優しい録画機能Aimeck15の録画機能で拘った点は「急がせない」です

タイトル：Aimeck15v1.3.5のメインUI改良こんにちは！だいぶ涼しくなりました、というか窓全開だと寒く感じます。RPAの「録画」ソースと画像認識のテンプレート画像の統合作業の進捗状況です。メインUIでアクションエディタ編集機能と同等の機能を追加する作業ですが大変な作業になっております。そもそもRPA編集機能とメインUIのクリック設定を統合前提に作っていないので、互換性を保ちつつ統合作業は、新たに作るよりも大変です。「迷いマウスが録画されるのが嫌！」と録画操作時のマウス軌道を

タイトル：Aimeck15アップデートv1.3.5に着手しましたこんにちは！画像認識オートクリッカーに本格RPA機能を付け足してしまったので、なんかチグハグな感じになっていました。もちろんなぜチグハグに感じるかは開発者として理解しています。画像認識部分とRPA部分が別UIに分かれてしまい、マルチアクションエディタのみで、通常のRPA操作が出来てしまうということが一つ（記録したアクションをファンクションキーに登録すると録画も簡単なRPAツールとして成立してしまう）RPA部分で「録画」した

タイトル：【Aimeck15v1.3.4公開】チェイン機能強化＆Microsoftの安全性審査クリア！こんにちは！マイクロソフトからの返答が無事に届き、並行してアップデート作業を進めていたAimeck15v1.3.4を正式にリリースしました！1.クイックタイマーからの「チェイン（連続処理）」機能クイックタイマーを作動させてクリックした後というのは、たぶん通常周回ループではないことが多いですよね？「時限アイテムの入手」や「イベント開始」など、「アイテム取ったけど周回ループに

タイトル：画像認識オートクリッカーAimeck15MicroSoftを待ってられんこんにちは！マイクロソフトへの申請許可を待ってる間にアンドロイド端末で遊んだりしていましたが、一向に返答が来ないので、Aimeck15のアップデート作業に着手してしまいました。1.クイックタイマーからの「チェイン（連続処理）」機能クイックタイマーを作動させてクリックした後というのは、たぶん通常周回ループではないことが多いですよね？「時限アイテムの入手」や「イベント開始」など、「アイテム取った

タイトル：画像認識オートクリッカーAimeck15番外編・弐こんにちは！現在もAndroid端末で楽しく遊んでいます。Gif動画のように、VFD風スペアナもマイク・再生楽曲に合わせて動作するようになりました。文字を横に流したりするともっと映えますね。車内音響特性への展開と演算の工夫マイクで音を拾えるということは、「車内音響特性なんて測定できるかしら？」と欲がでてきます。スマホCPUが強力になったとはいえ、専用のDSPチップを持たないスマホで馬鹿正直に計算をしたら、か

タイトル：画像認識オートクリッカーAimeck15番外編こんにちは！現在、画像認識オートクリッカー「Aimeck15」がMicrosoftのホワイトリストに登録されるのを待っているところですが、その空き時間を活用してAndroidアプリの作成に励んでいます。Android端末はセンサー類が豊富に搭載されていて、本当に魅力的なデバイスですよね。今回作ろうと思い立ったのは、90年代のカーオーディオによくあった「ドットマトリクスVFD（蛍光表示管）」の再現です。あの画面を表示させながら、9

タイトル：画像認識オートクリッカーAimeck15MicroSoftへ申請こんにちは！Aimeck15もv1.3.3となり、ある程度の機能は実装しましたので、マイクロソフトのホワイトリストへ入れてもらうための申請を行ないました。開発が盛んな時は、申請が通る前に改良（アップデート）してしまうので申請を渋っていたのですが、初回起動時にWindowsDefenderの赤い警告が出るのは、ユーザー様の立場からすると「シェアウェアなのにありえない・・・」という状況だったかと思います。しかし、

こんにちは、JON子です。9時〜15時は派遣システムエンジニア（SE）、16時〜19時は保育士をやっています。保育園で働いていて常々思っていたのが…シフトのルールが複雑すぎる！シフト表の作成に時間がかかりすぎる！！うちの園では主任が毎月作っています。毎月頭を抱えていて、月の半分以上はこの作成に費やしています園のシフト表のフォーマットでは、日付やシフト割り当て者のカウントはExcel関数で入るようにはなっています。ツール化できていたのはその部分だけ。うちの園のシフトルールは細か

タイトル：画像認識オートクリッカーAimeck15Rapidモードの修正こんにちは！今回は、先日実装した「Rapidモード」の修正（および最適化）についてのご報告です。1.0レイテンシを阻む壁Rapidモードを使用しても、全体設定で「スマートROI（自動追跡）」や「ハイブリッド・プレシジョン（軽量化検索）」がONになっていると、期待通りの高速クリックが実行されないという不具合がありました。完全に私の詰めが甘かったのですが、これらの設定が有効だと、内部で

タイトル：画像認識オートクリッカーAimeck15MicroSoftへ申請こんにちは！Aimeck15もv1.3.3となり、ある程度の機能は実装しましたので、マイクロソフトのホワイトリストへ入れてもらうための申請を行ないました。開発が盛んな時は、申請が通る前に改良（アップデート）してしまうので申請を渋っていたのですが、初回起動時にWindowsDefenderの赤い警告が出るのは、ユーザー様の立場からすると「シェアウェアなのにありえない・・・」という状況だったかと思います。しか

いつも「Aimeck15」をご利用いただき、本当にありがとうございます！本日は、大幅なパフォーマンス向上と操作感の改善を詰め込んだv1.3.2のリリース報告です。極限まで無駄を削ぎ落とすためのチューニングを重ねた結果、今回のバージョンは「過去最速」と言っても過言ではない異次元の仕上がりになりました！🚀メジャーアップデート＆爆速化のヒミツWindows版VRAM直読みキャプチャ実装ついにWindows環境でも、画面キャプチャをGPUメモリ（VRAM）から直接読み込むDXGI方式に

こんにちは！画像認識オートクリッカー「Aimeck15」の開発アップデートです。1.Linux版に追いつけ！Windows版キャプチャの高速化計画マルチアクションエディタ開発に伴い、Aimeck15の根幹である画像認識エンジンの改良をしています。画像認識がすこしだけLinux版より遅いWindows版を、VRAMから直接データを読み込む方式にすることでLinux版と同等の画像認識速度を達成する、といった計画なのですが、うまくいくでしょうか？今回はMicrosoftが公開している

こんにちは！画像認識オートクリッカー「Aimeck15」の開発日記です。今回は、画像認識エンジンの奥深くで行った「大手術」と、劇的な高速化についてお話しします。1.誤クリック問題と、気づいてしまった「恐ろしい無駄」事の発端は、処理のウエイトをすべて排除したことによる副作用でした。画面遷移時にチラッと写る画像に反応して誤クリックしてしまう問題が発生したため、クリック直前に再度画像認識を行うことで無事解決しました。しかし、その作業の最中、相棒のAI（Gemini）がポロッと言った「ワ

こんにちは！エイムトレーナーでの高速射撃デモの続きとなる今回は、Aimeck15の「超高速化」の裏で起きた予想外のトラブルと、その劇的な解決策についてお届けします！超高速反応に対応させるために待機時間（ウェイト）をなくしてみたところ、とんでもない事態になってしまいました…。1.ウェイトを消したら速すぎた！？誤クリック問題の発生「よし、ウェイトを削って最速で撃ち抜いてやろう！」と意気込んだものの、いざテストしてみるとまさかの問題が発生しました。なんと、画面遷移時にチラッと映る一

こんにちは！画像認識型オートクリッカー「Aimeck15_v1.3」の修正とアップデート情報をお届けします。1.デモムービー撮影での思わぬ「罠」Aimeck15のデモムービーを作ろうと、エイムトレーナーを使って超高速クリックの実演をしようとしたところ……マウスの移動がめちゃくちゃ遅い。「ナチュラルマウスをオフにすれば超高速でのクリックは可能なはず」と思ったのですが、確認してみるとずっとONのままでした。すいませんorz2.コードに潜んでいた「余計なウエイト」の正体

MAJORUPDATERELEASE画像認識型RPA「Aimeck15v1.3」遂にリリース！〜連打ツールから、頭脳を持つ本格RPAへ〜開発を続けてまいりましたAimeck15v1.3が、遂に正式公開となりました！今回は、自動化の常識を覆す「マルチアクションエディタ」の全貌と、初めての方必見のフル機能体験版についてご紹介します。こんにちは！開発者のashguineです。おかげさまで、Aimeck15の最新メジャーアップデートとなる「v1.3」のビルド・ウイルスチェックがすべて

こんにちは！マルチアクションエディタの最終調整が終わりました。1.鬼門の「座標系」不具合修正最終調整したのはウインドウスケールが適用されない不具合修正でした。画像認識で使われる座標系とマルチエディタの座標系の違いが不具合の原因だったのですが、この座標系の不具合修正は過去に何度も躓いて、いい思い出のない嫌な作業です。「基点がこうなって、画像認識で返される値がこうで・・・」ある程度は頭の中でイメージできるのですが、スマートROIとか絡んでくるともう処理能力が限界になってフリーズ

こんにちは！マルチアクションエディタのテストをしていました。1.オートウエイトとUIのブラッシュアップ操作録画にマウス軌道の録画は不要ということで、アクション間にオートで一律にウエイトを入れる仕様にしたのですが、いざ画像認識の方に操作データを書き出すとアクション間に大量に[ウエイト1.0s]と挿入されてしまいました。長いアクションが続くリストだと「これを一つづゝ手動で直すの絶対ヤダ・・・」と気づき、修正を行いました。その他に、テスト中にどの操作が実行されているのかエディタ

Aimeck15の画像認識デモになります（肌色が多い認識対象アプリなのでモザイクをかけたら・・失敗？）こんにちは！画像認識したら「クリック以外の動作も出来れば」と始めたマルチアクションエディタですがすんなりとキー操作・マウス操作の記録と実行はできるようになったのですが、これを使いやすいようにAimeck15に統合するのに苦戦しています。機能追加に熱中するあまりコードもスパゲティー化してしまい大変なことに・・・実際にキー操作・マウス操作を録画・編集のUIを作成して動かしてみると「これは不

こんにちは！台風の影響なのかとても蒸し暑いです。Aimeck15のアップデート順調に進んでいます、編集機能も統合のために大幅に改良を加え録画機能と編集機能の統合デザインがほぼできました。録画機能で録画、編集ソフトに読み込んで編集のような別アプリ状態から、使いやすい形にまとめられたかと思います。もちろん「なにこれ別アプリ？」とならないようにメインUIの変更は最小限度にとどめています。1.メインUIは最小限の変更で統合を実現「なにこれ別

録画機能のブラッシュアップを行っていました。1.テキスト入力とキー入力の明確な分離アルファベットキーを押した際に、すべてを「テキスト」として一括処理するのではなく、入力ボックス経由の文は「テキスト」、それ以外の単独入力は「キー入力」として個別に分類しました。これにより、WASD移動やアプリ固有のショートカットキー操作もマルチアクションエディタ上でHold/Release（押しっぱなし／離す）まで正確に調整可能になりました。2.透過スクリーンショット技術の確立テ

こんにちは！実際のアプリ上でアクションを記録する「シナリオビルダー」と、記録したアクションを編集する「マルチアクションエディター」を接続できました！（新しくなったAimeck15のキャプチャ動作画面）Aimeck15の画像認識とはまだ接続できていませんが、簡単なコード修正で画像認識からクリック以外の動作ができるようになる土台ができました。GIF動画の通りツール毎にシームレスな入力操作とは言えないのでもう少しブラッシュアップが必要ですね。1.Linuxでの日本語入力（IME）

こんにちは！現在、Aimeck15のマルチアクション対応を鋭意開発中です。今回は、シナリオエディタの入力部分が完成したことについてご報告します。1.認識対象アプリ上でのアクション入力完成とテキスト入力の工夫認識対象アプリ上でのアクション入力が完成しました！オレ的にはテキスト入力も直でアプリ上に入れたかったのですが、Lowレベル処理をしてしまうと互換性に問題が出るため、テキストボックス入力に落ち着きました。それでも、テキスト入力時には入力ボックスが入力したい場所にスッと近づいてくれ

こんにちは！現在、Aimeck15のマルチアクション対応を鋭意開発中です。今回は、開発の現場で起きた「大きな方針転換」と、録画品質のこだわりについてご報告します。1.録画方式への舵切りと「緊張しない入力」への挑戦RPAの入力を録画方式にする作業、少しずつですが確実に進んでいます。ただ、録画方式にすると本当に本格的なRPAツールになっちゃうんですよね・・・！そんな中でこだわっているのが、「録画中でも緊張しない入力方式」にしたいということです。なんか「録画中」となると、

今日の体重は65.8キロとやせました😺AIプログラミングAIに手助けしてもらいながらだいぶん作れました。geminiは、なぜこう書くのかを教えてくれながら、なので教材みたいな感じで、おぼえられます。動作中の動画です