ツール OpenSearchとRDBとNoSQLの賢い使い分け
OpenSearch Vector DBは、RDBが苦手とする意味や文脈を理解する「セマンティック検索」に特化したデータベースです。ユーザーの自然言語による質問への応答や、レコメンド、画像・音声検索などで力を発揮します。一方、RDBは厳格な...
ツール
ツール 
ツール [AWS]OpenSearchのベクターDBが変える検索の未来
OpenSearchのVector DBを効果的に使うには、ベクトルのインデックス名、次元数、距離メトリクス、検索アルゴリズムを定義することが重要です。運用では、企業独自の非構造化データをチャンク化し、埋め込みモデルでベクトル化して格納しま...
ツール [AWS]BedrockとOpenSearchで始める、全く新しいベクトルDB入門
Amazon BedrockでOpenSearchをベクトルDBとして使う際、インデックス、マッピング、k-NNアルゴリズムの設定が重要です。運用にはベクトルデータとメタデータ（元のテキストやスキーマ情報）が必要。テーブル名やカラム情報をメ...
ツール [AWS]Bedrockで利用可能なLLMモデル一覧
Amazon BedrockでLLMエンジンを変更する手順と、利用可能な主要モデルの詳細を解説。コンソールまたはAPIを介してモデルを選び、コンテンツに合わせて最適なAIを使い分ける方法を紹介します。Titan、Claude、Llamaなど...
ツール [AWS]Bedrock ハイパーパラメータ設定
業務内容や学習データ量に応じたハイパーパラメータの参考値をご提案します。Amazon Bedrockではモデルやタスクによって最適値が異なりますが、下記は一般的なベンチマークです。自然言語処理 (NLP) タスク（例：テキスト分類、感情分析...
ツール [AWS]Bedrockのファインチューニング手順
Amazon Bedrockでのファインチューニングは、まずJSON Lines形式のデータセットをS3にアップロードし、Bedrockコンソールでジョブを作成することから始まります。ジョブ作成時には、モデル名、ソースモデル、ハイパーパラメ...
ツール [yt-dlp]検索結果の動画URL取得
yt-dlp を使って YouTube の検索結果から動画 URL を一括取得するには、ytsearch エクストラクタを使用します。以下に具体的な方法を説明します。基本的なコマンドyt-dlp "ytsearch<件数>:<検索キーワード...
ツール [AWS]Amazon BedrockでSQL生成がボトルネック対処案
Amazon BedrockでSQL生成がボトルネックになっている場合、以下の対策が有効と考えられます。プロンプトとスキーマ情報の最適化スキーマ情報の絞り込み: 大規模なスキーマ全体をプロンプトに含めるのではなく、ユーザーの質問に関連するテ...
ツール [AWS]Amazon Bedrock互換のOSS
Amazon Bedrockは、複数の大手AI企業の基盤モデル（Foundation Models）を統合的に利用できるフルマネージドサービスです。そのため、Bedrockと完全に互換性のある単一のオープンソースソフトウェア（OSS）は存在...
ツール [ffmpeg]mp4から音声をmp3で保存
ffmpeg -i input.mp4 -vn -acodec libmp3lame -ab 192k output.mp3各オプションの意味は次のとおりです。ffmpeg: ffmpegプログラムを実行するコマンドです。-i input....