Locking and Memcache - Web DevelopmentYouTube↗  IA↗(long shot)
Education  5.6K views 16 likes 0 dislikes   27 May 2012
Udacity 651K subscribers United States YouTube↗


Please select the problem
You must specify your email and describe the problem in detail
Describe your problem in detail if it's not obvious

Click to Play Video Click to Play Video
では事前計算のためCassandraに変更したんですね
Reemplazaste memcacheDB con Casandra para lo precomputado.
コンテンションの問題は解決しました
Esto solucionó el problema de contención
それでもまだ
En ese punto---
リストを作成するたびにロックが必要でした
Cada listado tiene un bloqueo -el cual tienes que bloquear.
subreddit内へのすべてのリンクなどの
Si tienes un listado, que es una serie de IDs
IDのリストですね
de todos los enlaces en un subreddit,
subredditのレベルで
y tienes que modificar esto,
それをロックして
tienes que hacer un bloqueo alrededor de ese elemento,
修正する必要がありました
y esto es al nivel de un subreddit;
多くのユーザがsubreddit上にいると
entonces, si un montón de gente están en un subreddit,
多大なロックが発生します
allí ocurrirán muchos bloqueos.
以前オフィスアワーやレッスン4で考えた内容について[br]話したことがあるのですが
Hablamos un poco mientras estábamos trabajando, creo que en la Unidad 4,
こんな質問を受けました
y alguien preguntó sobre
もし2人が同時に同じユーザ名を登録しようとして
si en Datastore dos usuarios trataban de registrarse con el mismo nombre y al mismo tiempo,
ユニークキー制約ができない場合
y datastore no hace cumplir ninguna restricción de singularidad
データベースのキー重複をどのように[br]回避するかという質問です
en un campo de la base de datos, [br]¿cómo manejas esto?
私が考えたのは
Y mi respuesta fue que
データストアのトランザクションを用いる方法です
puedes utilizar las transacciones en datastore,[br]o puedes usar memcache
他にはmemcacheを使う方法があります
lo que no entiendo plenamente,[br]porque soy nuevo en datastore,
memcacheの機能の1つである
y este es uno de los 101 usos de Memcache.
グローバルロック機能を利用します
Tiene ese bloqueo global.
それで問題は解決しましたか?
Así que ustedes ya no usan eso?[br]-Así es.
グローバルロックの際に
Cuando usas memcache como servicio de bloqueo,
問題となるのは
el problema es que
memcacheノードを1つでも失うと
si pierdes un sólo nodo de memcache
サイトを見られないことです
pierdes todo el sitio,
そのノードを放棄すると
porque no puedes desechar ese nodo
アプリケーションの半数がmemcacheを
sin que potencialmente
参照できなくなる危険性があります
la mitad de las aplicaciones no puedan ver un nodo memcache
半数は無事だとしてもです
y la otra mitad sí.
参照できないアプリケーションは
La mitad que no lo vean decidirán que
そのノードにアクセスできないので
le hablaran a ese tipo nunca más e intentarán
制限を受けます
ligarse con un conjunto diferente de servidores.
Cassandraの複数ノードにデータを置けば
Cuando guardamos datos en nodos múltiples de Cassandra,
memcacheに置く場合とは
es distinto a cómo se guardan datos
状況が異なってきます
en diferentes nodos de memcache,
間違いは指摘してください[br]memcacheでデータを分散させるには
lo que es...corrígeme si me equivoco...cuando distribuyes por el memcache
特定のmemcacheにキーをハッシュします
básicamente haces un "hash" a tu "key" a una caja de memcache en particular,
レプリケーションはしません
y no hay idea de repetición.
ええ　Cassandraに似ているといえます
-Sí, es similar a Cassandra.
このノードにはキースペースがあり
Este nodo tiene un "key space"
キーの位置を変更することができます
que va a +1 y a -1.
memcacheでもレプリケーションはできます
Y puedes hacer lo mismo. Puedes replicarlo así en memcache también.
私がいた当時に使っていたのは
Estaban usando---
単純なmemcacheライブラリでした
Cuando me fui, estábamos usando una librería de memcache muy ingenua
要するにキーを取得して
que básicamente agarraba un "key" y decía,
どのmemcacheにハッシュして[br]格納するかを伝えるだけです
¿esto tiene un hash para cuál caja? y lo guardaba en esa caja.
マシンを失うとキーハッシュ全体に影響しました
Si perdías la caja, afectaba el "hashing" de todas las demás "keys".
memcacheが落ちると大変なことになるので
Perder una caja de memcache era algo muy doloroso,
空きスペースにレプリケートしていました
así que replicábamos memcaches para tener más espacio.
キャッシュに残るか[br]すぐに消えるデータしかなかった頃は
Teniendo más espacio las cosas no expirarían del caché lo suficientemente rápido
レプリケートするスペースに余裕がありました
o expirarían demasiado rápido,
しかしmemcacheを1つでも失うと
pero el punto débil de esto es que
すべてのキーを再配置する
con perder una sóla caja de memcache
難しい配分作業が求められました
todos las "keys" se reorganizaban.
そうです　モジュール･ハッシュです
-Correcto. Eso es "hashing" modular.
現在はコンシステント･ハッシュ法を行っています
Ahora usamos "hashing" consistente.
仕組みはこうです
Funciona de esta manera:
構造は基本的にCassandraのようなリング状です
Básicamente construye un anillo similar a este,
すべてのキーを
y en vez de un mapeado
個々のサーバにマッピングする代わりに
de las "keys" del 1 al 1000 a esta caja,
リング上にキーを配置するようなものです
de cierto modo les asigna a un lugar en el círculo
そしてキーに最も近いサーバを探します
y encuentra el servidor más cercano en el círculo.
サーバがダウンしたら次を探すだけです
Cuando este nodo falla, irá al siguiente.
10ノードのうち1つを失っても
Si tenemos diez nodos y perdemos uno,
再分配するのは全体の1割のキーです
sólo un décimo de tus llaves se redistribuyen.
コンシステント･ハッシュを使えば
-Si estás usando "hashing" consistente,
リング上のスペースにキーがハッシュされ
un llave puede hacer hash a este espacio en un círculo,
ノードを失ってもキーの位置は変わりません
y si pierdes éste, el "key" aún va en ese espacio,
他のキーの場所も変わりません
pero todas las demás que están aquí se quedan en el mismo lugar.
モジュール･ハッシュの場合は
Cuando usas "hashing" modular---
レッスン6で話しましたが
recuerden que hablamos del modular en la Unidad 6,
キーの分配方法はとても単純です
que es una forma muy ingenua de distribuir las "keys"
ただし10台のサーバ構造から[br]突然9台に減ってしまったら
De repente pasas de modular 10, porque tienes 10 servidores, a modular 9.
全体の1割ではなく9割のキーを失うという
En lugar de perder un décimo de tus "keys"
深刻なトラブルになります
pierdes nueve décimos, y eso es un gran problema.
私がいた当時こうした障害が何度か起きました
Eso de hecho nos pasó un par de veces cuando yo estaba allá.
サーバが1台ダウンしたり
Pierdes una caja memcache,
設定を間違えたりすると
o probablemente, la configuras mal,
アプリケーションはキーを見つけられず
el servidor de aplicaciones no la ve más y
キャッシュが突然機能しなくなるのです
de repente tu cache ya no está fresco,
するとユーザが殺到し
y tienes usuarios que están
データベースへ問い合わせたり[br]memcacheを酷使したりします
golpeando las bases de datos, agotando el "hard cache" o memcache,
ハードキャッシュともいいます
lo llamamos el hard cache.
負荷が高まりシステムがダウンします
y de repente tu perfil de carga cambia completamente, y todo explota.
すばらしい改善でしたね
Esto fue una muy buena mejora.
Similar videos:

Scaling - Web Development
Udacity
12.5K views 81 likes 1 dislikes 27 May 2012100% match

Memcached - Web Development
Udacity
13.5K views 115 likes 3 dislikes 23 Feb 2015100% match

Port - Web Development
Udacity
15.8K views 18 likes 0 dislikes 23 Feb 2015100% match

Code Organization - Web Development
Udacity
7.2K views 25 likes 1 dislikes 27 May 2012100% match

Scaling Databases - Web Development
Udacity
64.3K views 795 likes 7 dislikes 25 Apr 2012100% match

Course Outline - Web Development
Udacity
46.2K views 169 likes 0 dislikes 23 Feb 2015100% match

Best Browser Solution - Web Development
Udacity
9.6K views 22 likes 1 dislikes 23 Feb 2015100% match

Install Google App Engine
Udacity
7.1K views 40 likes 48 dislikes 17 Apr 2012100% match

Shopping List Take 1 - Web Development
Udacity
841 views 1 likes 0 dislikes 23 Feb 2015100% match

Reddit Architecture - Web Development
Udacity
27.7K views 397 likes 3 dislikes 27 May 2012100% match

Span and Div Solution - Web Development
Udacity
17.4K views 7 likes 0 dislikes 23 Feb 2015100% match

Adding Images
Udacity
12.9K views 36 likes 0 dislikes 23 Feb 2015100% match

Caching - Web Development
Udacity
12.1K views 102 likes 0 dislikes 23 Feb 2015100% match

Introduction - Web Development
Udacity
23.3K views 107 likes 0 dislikes 23 Feb 2015100% match

Part 2 - Web Development
Udacity
643 views 2 likes 0 dislikes 07 May 2012100% match

Caching Techniques - Web Development
Udacity
34.4K views 216 likes 7 dislikes 23 Feb 2015100% match

Thing DB - Web Development
Udacity
6.8K views 34 likes 1 dislikes 27 May 2012100% match

Google App Engine - Web Development
Udacity
10.1K views 13 likes 3 dislikes 17 Apr 2012100% match

Differences Between Get and Post - Web Development
Udacity
78.3K views 516 likes 18 dislikes 22 Apr 2012100% match

World Wide Web Solution - Web Development
Udacity
12.6K views 14 likes 0 dislikes 23 Feb 2015100% match

Cookies - Web Development
Udacity
38.4K views 315 likes 11 dislikes 23 Feb 2015100% match

Cookie Domains - Web Development
Udacity
5.1K views 22 likes 0 dislikes 23 Feb 2015100% match

Datastore Types Solution - Web Development
Udacity
656 views 1 likes 0 dislikes 25 Apr 2012100% match

Introducing URLs - Web Development
Udacity
7.1K views 21 likes 0 dislikes 23 Feb 2015100% match

Best Browser - Web Development
Udacity
14.9K views 7 likes 0 dislikes 23 Feb 201567% match

Most Common Method - Web Development
Udacity
9.7K views 5 likes 0 dislikes 23 Feb 201567% match

Precomputed Caching - Web Development
Udacity
12.2K views 80 likes 0 dislikes 27 May 201267% match

Bold Tag - Web Development
Udacity
53K views 29 likes 0 dislikes 23 Feb 201567% match

Correct URL - Web Development
Udacity
10.9K views 6 likes 1 dislikes 23 Feb 201567% match

Query Parameters - Web Development
Udacity
22.6K views 78 likes 3 dislikes 23 Feb 201567% match


Settings Privacy About Contact Donate