Hatena Blog Tags
はてなブログ トップ
blob
このタグでブログを書く
言葉の解説
ネットで話題
関連ブログ

blob

(コンピュータ)
【ぶろぶ】

【Binary Large OBject】
データベースで用いられる型の一つで、主に、画像や音声などの大規模なバイナリデータを格納するために用いられる。ブロブ。
ブログ(blog)ではない。

このタグの解説についてこの解説文は、すでに終了したサービス「はてなキーワード」内で有志のユーザーが作成・編集した内容に基づいています。その正確性や網羅性をはてなが保証するものではありません。問題のある記述を発見した場合には、お問い合わせフォームよりご連絡ください。
JBS Tech Blog•1ヶ月前

Data Factoryを使用してSnowflakeにデータをロードする

Snowflakeは、AWSやGoogle Cloud、Microsoft Azureなどのクラウドプラットフォーム上でホストされるDWHサービスです。 ストレージとコンピュートを分離したマルチクラスタ・共有データアーキテクチャや、データの一元管理が可能な高い拡張性と柔軟性を備えるSnowflakeですが、今回はSnowflakeに対してAzure Data Factoryを使用してデータを連携する方法をご紹介します。 実施概要 事前準備 実施手順 Snowflakeリンクサービスの作成 データセットの作成 パイプラインの作成 検証と発行 パイプラインの実行と確認 おわりに 実施概要 本記事で…

#Azure#Snowflake#Azure Data Factory#ETL#blob

関連ブログ

人生を豊かにする言葉「今日の一言」•2年前

一生懸命やらないと、かえって疲れる。

北海道「人生向上委員会」というblogとYouTubeチャンネルを運営している酒井隆行です。毎朝、今日1日のテーマとなる「言葉」を紹介する「今日の一言」を毎朝ご紹介しています。気になる言葉のご意見ご感想もお聞かせ下さい。また、おすすめの「言葉」も募集していますので、コメントの書き込みかメールフォームにて教えて下さい。「今日の一言」でお名前（ペンネーム）とSNS・blogのURLと共にご紹介します。 https://ssl.form-mailer.jp/fms/2978554e736921 www.youtube.com 今日の一言 仕事というのは、 一生懸命やらないと かえって疲れる。 www…

#酒井隆行#北海道#人生向上委員会#異業種交流会#今日の一言#blob#YouTube
MarkdownとBullet Journal•3年前

【Git】実はファイルを差分でも保存する

Gitのファイル管理の続き 前回の記事でGitは作業ディレクトリ内のGit追跡fileを、staging及びcommit履歴に"blob"と呼ばれる圧縮独自フォーマットのfileで全て保存していることを説明した。 programmingforever.hatenablog.com またその各file（blob）はsnapshot、つまり以前のfileとの変更点の差分保存ではなく、各fileの内容のまま（blobに形を変えた上で）全て保存していると説明した。 しかしそうなると、例えば1万行あるfileのたった１行だけを修正しても、非常によく似た大きなfile（blob）が2つ保存されてしまう。G…

#git#blob#差分
Little Strange Software•3年前

シンプルすぎるHTMLファイルの骨組みテンプレートがダウンロードできます！

どうも！LSSです！！ ちょっと手軽にHTMLやCSS、JavaScriptにSVGなどのテストをしたい時。 はてなブログにログインできる環境なら、下書きで試すのも手ですが、そうじゃない環境下でただしPCはある、という時。（かなり限定的ですね^^;） メモ帳などのテキストエディタを開き、最小限のHTML構成である、 <html><head></head><body></body></html> …という内容をささっと手打ちで打ち込み、保存してから、拡張子を「.html」に変更する、なんて事をしたりします。 ６つ打って拡張子を変更するだけなので、ささっと出来るのは出来るんですが、なんとなくボタン…

#HTMLファイル#blob#JavaScript
Little Strange Software•3年前

【JavaScript】簡易テキストファイル書き換えスクリプト

→ // どうも！LSSです！！ 今回は、使いどころのよく分からないツールを作ってみましたｗ 使い方 例えば… コード あとがき 使い方 テキストファイルの中の特定の文字を、違う文字に変換するツールです。 まず「変換元の文字列」「変換後の文字列」を入力します。 次に、「ファイルを選択」ボタンを押し、お手元の端末内にある対象のテキストファイル（HTMLファイルやSVGファイルやCSVファイルも選択可能です）を選ぶと、即座にそのテキストファイル内に「変換元の文字列」と同じものがあったら全て「変換後の文字列」の内容に書き換えられます！ なお、出力後のファイル名は、元のファイル名の末尾に「_r」が付与…

#JavaScript#FileReader#blob#replace
Little Strange Software•3年前

いつかちゃんとした記事にしたいけど…JavaScriptはこんな事もできます、という例

どうも！LSSです！！ JavaScriptで出来る事、を色々調べていくうちに「これは凄い！」とびっくりするようなものを見つけました（結構 前に、ですがｗ） ちゃんと自分で咀嚼し、飲み込んでから、解説記事など書きたいと思っていますが、いったん「JavaScriptはこんな事もできる！！」というのをシェアしたいと思います^^ ダウンロードリンク これだけでは何が凄いのか分からないですよね^^; 何が凄いか、って 汎用性 ダウンロードリンク // \n\n\n\n'; blob = new Blob([txt], { "type" : "text/plain" }); if (window.nav…

#JavaScript
•1日前

マイクロサービスアーキテクチャとは

なぜマイクロサービスアーキテクチャなのか？ 再利用か分離か 再利用のメリットとデメリット 分離のメリット 強制的に分離する手段 マイクロサービスアーキテクチャの概要 マイクロサービスアーキテクチャの構成要素 マイクロサービスアーキテクチャのサイドカーパターン マイクロサービスアーキテクチャのフロントエンドの実装 マイクロサービスアーキテクチャの連携方式 サービス間のオーケストレーション 各サービスの粒度について データの分離 ほかのアーキテクチャとの違い 分散されたデータへの対応方法 マイクロサービスのデータ分離のメリット 備考 なぜマイクロサービスアーキテクチャなのか？ 再利用か分離か まず…

•1日前

オーケストレーション駆動サービス指向アーキテクチャ

参考 オーケストレーション主導のサービス指向アーキテクチャー 概要 オーケストレーションアーキテクチャのコンポーネント 再利用…そして結合 再利用性のデメリット より変更範囲が少ない集約 備考 参考 「FundamentalsOfSoftwareArchitecture.md」という記事を参考にしてます。 https://github.com/zhangjunhd/reading-notes/blob/master/software/FundamentalsOfSoftwareArchitecture.md#13service-based-architecture-style ちなみのこの記事…

•1日前

スペースベースアーキテクチャ

スペースベースアーキテクチャが解決する課題 スペースベースアーキテクチャの概要 スペースベースアーキテクチャの構成要素 スペースベースアーキテクチャの処理ユニット アプリケーションコード インメモリデータグリッドとレプリケーションエンジン サンプルコード Hazelcastの仕組みについて 仮想メモリ内部のデータグリッド 仮想ミドルウェア メッセージンググリッド 処理グリッド デプロイメントマネージャー データポンプ データライター データリーダー スペースベースアーキテクチャの具体例 備考 スペースベースアーキテクチャが解決する課題 ほとんどのWebアプリケーションは、次のような一般的なリク…

•1日前

イベント駆動アーキテクチャ ブローカータイプ /メディエータータイプ

イベント駆動アーキテクチャ - ブローカータイプ - イベント駆動アーキテクチャのブローカータイプの実装方法 ブローカータイプの構造 ブローカータイプのメリット ブローカータイプの開発事例例 イベント駆動アーキテクチャ メディエイターパターンとは イベントメディエイターの実装方法 イベント駆動アーキテクチャのエラー処理 AWSでイベント駆動アーキテクチャを実装すると... イベント駆動アーキテクチャの総評 備考 参考 「FundamentalsOfSoftwareArchitecture.md」という記事を参考にしてます。 https://github.com/zhangjunhd/readi…

•1日前

レイヤードアーキテクチャとは？

レイヤードアーキテクチャは、n層アーキテクチャとも呼ばれており、最も一般的なアーキテクチャのうちの一つだ。このアーキテクチャはシンプルさや親やすさ、コストの低さからほとんどのアプリケーションのスタンダードの形となっている。 minegishirei.hatenablog.com レイヤードアーキテクチャとは何か？ レイヤードアーキテクチャの構成 レイヤードアーキテクチャの基本構成要素 レイヤードアーキテクチャの種類 レイヤードアーキテクチャの開放レイヤーと閉鎖レイヤー レイヤードアーキテクチャのメリット:「関心ごとの分離」 安い レイヤードアーキテクチャのデメリット デプロイしづらい モジュー…

•1日前

パイプラインアーキテクチャとは

パイプラインアーキテクチャとは 概要 パイプ フィルター パイプラインアーキテクチャの威力 具体例1:関数型 具体例2:Apache kafka パイプラインアーキテクチャのメリット デメリット 備考 パイプラインアーキテクチャとは ソフトウェアの歴史の中で繰り返し出現するスタイルが、このパイプラインアーキテクチャスタイルだ。 関数型プログラミング言語の考え方を拡張したかのようなアーキテクチャで、 bashやpowershellなどのシェル言語に近い構造を持つ。 今回のアーキテクチャはより高次元に拡張し、ビジネスアプリケーションレベルにも使用できる。 概要 パイプラインアーキテクチャには以下の…

•1日前

マイクロカーネルアーキテクチャ / プラグインアーキテクチャ ドキュメント

概要 マイクロカーネルアーキテクチャは別名、プラグインアーキテクチャと呼ばれている。 コアシステムとプラグインの二つのコンポーネントで構成される比較的シンプルなアーキテクチャであり、アプリケーションのカスタムロジックの結合と分離を実現している。 プラグインアーキテクチャの用途は大きく分けて2種類あり、 パッケージ化され、単一のモノシリックなアプリとしてダウンロードされてインストールできるようなアプリケーション カスタムビジネス(国ごとのローカライズが発生するなど)アプリケーション このいずれかで使用される。 今回は前者の意味合いで(ダウンロードして使用するタイプのアプリケーションで)解説する。…

CLOVER🍀•1日前

Metaの「Llama 3」をOpenAI API互換のサーバーを持つllama-cpp-pythonとLocalAIで試す

これは、なにをしたくて書いたもの？ MetaからLlama 3がリリースされました。 Meta、無料で商用可の新LLM「Llama 3」、ほぼすべてのクラウドでアクセス可能に - ITmedia NEWS このLlama 3をOpenAI API互換のサーバーを持つllama-cpp-pythonおよびLocalAIで動かせそうなので、試してみることにしました。 Llama 3 Llama 3はMetaの公開しているLLMです。 Meta Llama 3 Introducing Meta Llama 3: The most capable openly available LLM to dat…

スタディサプリ Product Team Blog•2日前

dep-doctor による archived / not-maintained な依存ライブラリ検出の仕組み

こんにちは。@chaspyです。技術戦略グループのマネージャをしています。 本記事では dep-doctorという依存ライブラリのメンテナンス状態をチェックするツールを活用した事例を紹介します。 依存ライブラリのメンテナンス状態を確認したい スタディサプリ小中高では、言うまでもなく多くの OSS / ライブラリに支えられています。しかし、それらのライブラリがメンテナンスされなくなってしまったとしたら、以下のリスクが存在します。 セキュリティ: 既知の脆弱性が修正されない可能性があります。新たに発見された脆弱性に対して、パッチが提供されないため、プロジェクトがセキュリティ上の危険にさらされる可能…

Fuara Tech•3日前

Visual Studio と Direct3D12 Template

プロジェクトテンプレート Visual Studio 用のプロジェクトテンプレート Direct3D Game Visual Studio templates (Redux) | Games for Windows and the DirectX SDK blog Github で管理されている。 GitHub - walbourn/directx-vs-templates: Direct3D Visual Studio Templates Wiki の「VS 2019 / VS 2022」をクリックすると、VS2019/VS2022向けの vsix ファイルをダウンロードできる。Direct…

技術メモ(主に自分向け)•3日前

ハッシュ値と暗号化の書き方

Apexクラスでハッシュ値の作成と暗号化の書き方をメモ。 (もしかしたら他に良い書き方があるかもですが、、、参考程度に) Integer intToken = 99; //tokenの文字列を100文字と設定 Integer position; String charList = 'abcdefghijklmnopqrstuvwxyzABCDEFGHIJKLMNOPQRSTUVWXYZ0123456789'; //ハッシュ値に使用する文字列 String strHash = ''; //ハッシュ値作成 for (Integer i = 0; i <= intToken; i++) { posi…

ねぎ嫌い•3日前

GoogleApisライブラリに実装されているExponential Backoff

動機 Google Admin SDKを使って遊んでる時にふと気になって読んだので残しておく。 調査の経過はZennのScrapにしてある。 GoogleApisライブラリのExponential Backoffを追いたい 結論 googleapisが依存しているgaxios(Axiosのラッパー)の中で実装されている。 retry.tsでリトライに関する判定等を行なっており、内部で再施行回数によって指数的に待ち時間を挿入している。 実際にbackoffを計算しているところを抜粋すると以下 // Formula: retryDelay + ((2^c - 1 / 2) * 1000) cons…

パソコン関連もろもろ•3日前

「InstantStyle」がDiffusersから使えるようになりました。

はじめにこちらのスクリプトをDiffusers用に書き換えました。 touch-sp.hatenablog.com スタイル画像こちらの画像を使わせてもらいました。 結果シードを変えて4枚の画像を作成しました。スタイルを維持しながらウサギを猫に変えています。 PC環境 Windows 11 CUDA 11.8 Python 3.11Python環境構築 pip install torch==2.2.2+cu118 --index-url https://download.pytorch.org/whl/cu118 pip install git+https://github.com/huggi…

ROUTE06 Tech Blog•5日前

PR-Agent×GitHub Action×Azure OpenAIで実現するAIコードレビュー

Pull requestのタイトルや説明文を書いている時、「これ絶対AIでできるよな」と感じたことがある開発者は少なくないと思います。 もちろん変更の経緯や背景など、コードの差分からは読み取れない情報もありますが、コードの差分からわかることはAIが書いてくれるといいですよね。 この願いを叶えてくれるのがCodiumAIが提供しているPR-Agentです。GitHub Actionで実行でき、OpenAIはもちろんAzure OpenAIやAmazon Bedrockも使えます。 PR-Agentはすでにいろいろなところで取り上げられています*1 *2 *3ので、このブログ記事では、これまでにあ…