2023.12.26
Geminiの使い方と精度調査
IndexはじめにGeminiの概要モデルの種類モデルのアーキテクチャモデルの性能Geminiの環境構築手順Gemini APIの費用他モデルとの費用の比較Google Colabratoryでの環境構築Vertex A…
Journal
JOURNALについて
データアナリティクスラボ株式会社では、ITやデータサイエンスに関する技術の研究活動を行っています。このブログでは、研究活動で得られた知見や検証結果についての情報を発信します。
本ブログで提供される情報は、可能な限り正確かつ最新の情報であるように努めますが、必ずしもその正確性を保証することはできません。場合によっては誤情報が含まれたり、最新の情報ではない可能性もあります。予めご了承いただけますようお願い申し上げます。
2023.11.13
LangChainを利用したハイブリッド検索の実装
Indexはじめにハイブリッド検索とはハイブリッド検索を使う理由実装実行環境1. 環境構築OpenAI APIの利用状況の確認方法2. データセットの読み込みと整形3. ベクトル検索の実装4. キーワード検索の実装5. …
2023.10.12
イジングマシンで解く最適化問題の定式化
Index1. はじめに2. イジングマシンとは3. イジングマシンのための定式化3.1. イジングモデルイジングモデルにおける定式化3.2. QUBO形式3.3. 定式化の違い数学的等価性人間による解釈性4. 例題最大…
2023.09.29
日本語LLMにおけるトークナイザーの重要性
Indexはじめに日本語LLMについてJapanese StableLM AlphaELYZA-Japanese-Llama-2-7bモデル評価本記事で取り上げるポイントトークナイゼーションとはトークナイゼーションの前提…
2023.09.22
Open Interpreterの動かし方
Indexはじめに使用したのPCの環境環境構築事前準備Docker上で作った仮想環境を使う方法手順OpenAI APIの利用状況の確認方法OpenAI APIを使用する場合の注意点セットアップで躓いた点MacOS上で作っ…
2023.08.17
データサイエンスとドローンに関する研究紹介
Indexはじめにドローンのキ･ホ･ンドローンに定義はあるの？無人航空機についてもう少し詳しく！ドローンとラジコン機・ヘリコプターの違いは？DSがドローンで遊んで何になる？日本の先進的な取り組みレベル4に向けたドローン開…
2023.08.15
論文紹介：Textbooks Are All You Need
Indexはじめに文献情報文献レビュー概要本研究の目的本研究の前提本研究の結果1. データを教科書品質なものにすることで小さなモデルでも高い精度を出すことができる2. ファインチューニングによって性能が大きく上がる研究の…
2023.08.10
Llama2の動かし方
Indexはじめに調査の概要調査の目的調査レポートセットアップ手順1. ローカルにダウンロードして使う方法2. HuggingFace経由で使う方法テキスト生成結果の比較まとめ参考オウンドメディアも運営しています はじめ…