コンテンツへスキップ

/recent
- /recorded
- /scheduled
- /dev
- /print
- /series
/app
/root

重み

生成AIは知識を圧縮できるのに、なぜ会話は圧縮できないのか

2026-08-212026-08-21 by chiilabo

#生成AI（93） #AIエージェント（43） #Claude Code（43） #トークン（33） #LLM（27）

カテゴリー記事タグ AIエージェント、Attention、Claude Code、Codex、compact、KVキャッシュ、Llama 3、LLM、RAG、RNN、Transformer、コンテキスト、コンテキストウィンドウ、サブエージェント、チャット履歴、トークン、トークン消費、パラメータ、プレフィックスキャッシュ、プロンプトキャッシュ、会話履歴、入力トークン、利用枠、学習データ、推論コスト、生成AI、要約、重み、長期依存、隠れ状態

mini-MNISTで「AIが学習する」とはどういうことか観察する

2026-08-19 by chiilabo

#機械学習（26） #ニューラルネットワーク（17） #学習データ（15） #人工知能（14） #推論（8）

カテゴリー記事タグ AI学習、mini-MNIST、MNIST、overfitting、ニューラルネットワーク、ニューロン、パーセプトロン、モデル、人工知能、内部状態、分類、初期状態、学習、学習ステップ、学習データ、手書き数字、推論、未知データ、機械学習、正解率、汎化、特徴、画像認識、神経回路、結合、訓練、誤判定、過学習、重み、重み調整

生成AIモデルの「学習」でほんとうに記録されるデータ

2026-08-192026-08-10 by chiilabo

#生成AI（93） #トークン（33） #機械学習（26） #大規模言語モデル（23） #ニューラルネットワーク（17）

カテゴリー記事タグ KVキャッシュ、MNIST、Transformer、ZIP圧縮、アテンション機構、データセット、トークン、ニューラルネットワーク、パラメータ、モデルサイズ、一般化、中間層、丸暗記、入力層、写像、出力層、勾配降下法、多層パーセプトロン、大規模言語モデル、学習データ、情報量、手書き数字認識、推論、文脈内学習、機械学習、生成AI、著作権、過学習、重ね合わせ、重み

【waka-gen-model】「和歌」の小さな生成AIを作った（小規模言語モデル）

2026-06-282026-06-20 by chiilabo

#言語モデル（18） #Transformer（14） #パラメータ（12） #可視化（12） #重み（7）

カテゴリー記事タグ attention head、BPE、decoder-only、GELU、MLP、NDJSON、RMS、softmax、Transformer、waka-gen-model、カテゴリカルサンプリング、トークン化、パラメータ、ロジット、交差エントロピー損失、位置埋め込み、可視化、和歌、和歌生成AI、埋め込み、小型Transformer、損失関数、教育用言語モデル、文字レベルトークン化、次文字予測、温度サンプリング、確率分布、自己回帰生成、自己注意機構、言語モデル、重み

仕事の順番は、優先度関数の設計問題？（優先キューの考え方）

2026-06-07 by chiilabo

#ワークフロー（20） #依存関係（16） #タスク管理（10） #スタック（7） #重み（7）

カテゴリー記事タグ aging、FIFO、LIFO、starvation、アイゼンハワーマトリクス、エイジング、キュー、スケジューリング、スコアリング、スタック、タスク、タスク管理、ワークフロー、仕事、仕事量、依存関係、優先キュー、優先度関数、優先順位、処理能力、意思決定、放置時間、未完了、緊急度、締切、評価関数、重み、重要度、順番、飢餓状態

生成AIの指示した文章（プロンプト）のほとんどは学習されない

2026-02-112026-02-11 by chiilabo

#生成AI（93） #プロンプト（37） #トークン（33） #コンテキストウィンドウ（17） #ニューラルネットワーク（17）

カテゴリー冊子テキスト、収録予定、記事タグ AIサービス、Fine-tuning、RAG、コンテキストウィンドウ、チャット履歴、トークン、ニューラルネットワーク、パラメータ、ファインチューニング、プロンプト、モデル、入力、内部構造、再学習、出力、勾配降下法、外部データベース、学習、学習データ、対応関係、尤度、推論、推論時、条件付け、生成AI、知識カットオフ、記憶、評価付け、重み、関数

AIは「覚える」けれど「学ばない」（コンテクストとニューラル・ネットワーク）

2025-11-062025-11-06 by chiilabo

#生成AI（93） #ChatGPT（71） #AI（31） #データベース（19） #ニューラルネットワーク（17）

カテゴリー記事タグ AI、ChatGPT、エンベディング、コンテクスト、コンテクストウィンドウ、セッション、データベース、テキスト、デコード、トークン化、トレーニング、ニューラルネットワーク、パラメータ、ベクトル、メモリ機能、モデル、人間、会話、入力データ、動的、固定性、変換ルール、学習、推論、生成AI、短期記憶、神経回路、記憶、記録、重み

© 2026 Chiilabo Note • Built with GeneratePress

検索: