これは Elasticsearch Advent Calendar 2015 8日目の記事です。 ログの可視化ツールとしてKibanaを使っている中で、Elasticsearch運用として色々と得られた知見を書きたいと思います。 Elasticsearchは、ライトな環境だったら特にチューニングなく安定してますがある程度ドキュメント数が積まれてくると、色々苦労があるなという印象です。 ここに書かれているのは、事情がありシングル構成で頑張った話なので、クラスタ組んでスケールするとこんな悩みはないのかもです。 でも、ログは運用系に入るのでそんなにコストかけれるとこはないのではという個人的な所感。 ラインナップとしては、下記のような感じです。 Kibana経由で重たいクエリが投げられると負荷高すぎて泣いた話 高負荷対策として、fielddata_cacheをディスクに逃がす方法 fluentdの
はじめに 当エントリはDevelopers.IOで弊社AWSチームによる2015年アドベントカレンダー 『AWS サービス別 再入門アドベントカレンダー 2015』の8日目のエントリです。 昨日7日目のエントリは大栗の『Amazon RDS』でした。 このアドベントカレンダーの企画は、普段AWSサービスについて最新のネタ・深い/細かいテーマを主に書き連ねてきたメンバーの手によって、今一度初心に返って、基本的な部分を見つめ直してみよう、解説してみようというコンセプトが含まれています。 本日8日目のテーマは『Amazon EMR』です。 Amazon Elastic MapReduce（Hadoopクラスター Amazon EMR） | アマゾン ウェブ サービス（AWS 日本語） 目次 Amazon EMRとは 分散処理基盤 分散アプリケーション 伸縮自在性 安全性 サービス利用のユースケー
始める前に要チェック！プログラミングで挫折する3つのパターンとその解決方法 初心者がプログラミング学習で挫折するパターンを受講生5,000名を越えるプログラミングスクールの事例から紹介。その解決方法4つを解説します。解決方法は、未経験からエンジニアを育てたリブセンスも提唱している方法です。 テックアカデミーマガジンは受講者数No.1のプログラミングスクール「テックアカデミー」が運営。初心者向けにプロが解説した記事を公開中。現役エンジニアの方はこちらをご覧ください。 ※ アンケートモニター提供元：GMOリサーチ株式会社 調査期間：2021年8月12日～8月16日 調査対象：2020年8月以降にプログラミングスクールを受講した18～80歳の男女1,000名 調査手法：インターネット調査 プログラミングの勉強を始めたけど、途中で挫折してしまったという経験はないでしょうか。 そこで今回はTec
Beacon技術を使って全自動出退勤を実現する どうも！saitouです。 先月リリースされた「全自動出退勤」対応のシュキーン（以下、とおってシュキーン）ですが、 今回は表題のとおり、どのような仕組みで全自動出退勤を実現したのか、について解説します。 とおってシュキーンでは、オフィスへの入退出の検知にBeaconと呼ばれる技術を使っています。 ▼とおってシュキーンのデモ動画。iOS/Android端末を持って「通るだけ」で、自動で出退勤を記録します。 Beaconとは Beacon技術は、主にBeacon信号を発する機器とその信号を検知する機器によって成り立ちます。 これをとおってシュキーンに置き換えると、オフィスに設置された親機がBeacon信号を発信し、 そのBeacon信号を従業員のスマートフォンにインストールされた子機用アプリが検知する、という関係になります。 退勤時間の確定 とお
この記事はGit Advent Calendar 2015の8日目の記事です。 Gitリポジトリのメンテ？ Gitリポジトリにあるファイルは .git がバージョン管理をしています。 今回はその .git をメンテナンスする話です。 はじめに リポジトリに容量の大きいファイルをコミットしてしまった git clone がやたらと時間がかかる（知らない間に容量の大きいファイルがコミットされている可能性がある） 複数あるリポジトリを統合したい こんな悩みを持ったことはないでしょうか。大型のプロジェクトでないと発生しないと思うので、個人プロジェクトではなかなか遭遇することはないでしょう。 今回は上記を解消するための リポジトリメンテナンス方法 をご紹介します。 !! 注意 !! Gitリポジトリのメンテナンスは破壊的なため、Gitのコマンドを理解している方のみ行ってください。 この記事を読んで実
Embulk Advent Calendar 2015の7日目の記事です。 こんにちは @sonots です。淡々と拙作のプラグインの紹介をしていこうと思います。文量が多くなったのと明日、明後日が空いていたので、記事を分けて ７日目: embulk-filter-column および embulk-filter-row ８日目: embulk-output-vertica ９日目: embulk-parser-none および embulk-filter-stdout のように紹介していこうと思います。 embulk-filter-column URL: https://github.com/sonots/embulk-filter-column カラムの絞り込みをするための filter プラグインです。 弊社での Embulk のユースケースは、主に HDFS に格納されているログを
上記の中のRDBMS全てに加えて、クラウド時代に合わせて再設計したAurora、MySQLのフォークであるMariaDBが使用できます。 MySQL：最もシェアがあるOSSのRDBMS。 Oracle：高いシェアがある商用RDBMS。 SQL Server：高いシェアがある商用RDBMS。Windowsとの親和性が高い。 PostgreSQL：機能が豊富なOSSのRDBMS。 Aurora：AWSがクラウド時代に再設計したRDBMS。MySQL 5.6互換でMySQLの5倍高速と言われています。 MariaDB：MySQLからフォークしたRDBMS。MySQL互換。 性能向上が簡単に実施可能 Amazon RDSでは、様々なスペックのインスタンスを使用できます。最大40個のvCPUのインスタンスや244GBのメモリのインスタンスがあります。性能が不足してきたら、インスタンスのサイズを変更す
[レベル: 上級] Googleは、ローカルビジネス情報をschema.orgで提供する仕様を構造化データの開発者向けサイトで公開しました。 名称や住所などの各種情報をローカルナレッジパネルに表示したり、そこから注文や予約といったアクションを実行させるたりすることができます。 ローカルビジネス情報をschema.orgでマークアップ schema.orgの LocalBusiness でマークアップすることにより、あなたが営むローカルビジネスに関する情報を正確かつ詳細にGoogleに伝えることができます。 たとえば、正しい名前や住所、電話番号を定義できるし、メニューが書かれているURLや営業時間を伝えられます。 こうした情報は、検索結果のナレッジパネルに表示されます。 schema.org/LocalBusinessで利用できる次のプロパティが必須または推奨、任意です。 name（名称、必
Webサイト、ブログ、アプリ、ワイヤーフレームなどに最適、小さいサイズでも見やすく分かりやすい美しくデザインされたアイコン素材を紹介します。 アイコンは有料版と無料版があり、無料版350種類はCC0 1.0の太っ腹ライセンス！ 有料版4,000種類は今回、コリスのビジター限定で3名様にプレゼントします。 応募期間は、2015年12月10日で終了しました。 ※無料版のダウンロードは、まだ可能です。 Nova Icons Pack 無料版ダウンロード・有料版プレゼント応募の前に、Nova Iconsの特徴を。 Nova IconsはGoogle Material Designのガイドラインに従ってデザインされています。 アイテムは、98カテゴリ4,000種類 Webサイト・アプリ・ワイヤーフレームに最適 ジオメトリックな美しいデザイン 24pxのグリッドベースの正確なデザイン シャープで美しい
リリース、障害情報などのサービスのお知らせ
最新の人気エントリーの配信
j次のブックマーク
k前のブックマーク
lあとで読む
eコメント一覧を開く
oページを開く