使用 replicate 的好处。 可以建立一个简单的集群，
增加可用性
这样只要不是底层的datastore 同时挂掉，那么这部分数据还是可以使用的。
增加可维护性
便于系统升级， 如硬件设备的升级； 在升级的时候，系统还是可用的。
增加可扩展性； gizzard 的数据分区，如果是采用 hash 的方式， 分区的大小是不能简单的调整的。 在第一次分区的时候，就决定了数据分成几个区， 如果是采用 范围分区的方式， 而且分区的id 的自然增长的， 那么可以将新的数据的分到新的分区中
如 当前的id = 10000 ;
设计了如下的分区
0～10000 分区1
> 10000 分区2
在运行到 19000 的时候，
可以这样做
0~10000 分区1
10000～20000 分区2
> 20000 分区3
这也算一种 分区的调整的方法吧。
采用 hash 的方式，数据比较均匀，每张表的读写会比较均匀。
不采用 hash , 可以 比较自然的体现 数据的 时间价值；一般 时间久的数据，就比较冷； 这样 一段时间后，可以将这部分数据用相对 便宜的硬件来提供。
通过引入 replicating; 可以 对 上层屏蔽这种变化
可以自由的增加服务器。
特别是 分区的尺寸得到控制，可以比较快速的增加分区中服务器的数量。
也可以在数据冷却后，将少 服务器的数量。
]]>
太小的网站，那就是杀鸡用牛刀了。
引入太高的复杂性，不能取得相应的效益。
但是一般都是认为/期望自己的网站是能达到这样的访问量的。
过度设计，过度复杂的架构。
需要一个能够演化的架构，
能够快速开发，又能够在性能成为问题的时候，能够简单的替换，而不是推到重来。
选择一个合适的可以演化的架构。
]]>
分布式数据库的一个 中间层
实际的后端，可以是sql , 也可以是其他形式的。 目前实际使用比较成熟的是 mysql.
实现数据分区和数据复制
partitioning and replication
将数据可以分割的合适的大小，便于单台服务器进行处理
按照目前的普通pc服务器的性能，每台服务器存放 64G左右的数据库关系数据，是没有任何问题的。
看来我们的数据还是太少
还不需要使用如此复杂的工具。
gizzard 可以简单的理解为，在 mysql 上增加一层，能够实现 数据分区和数据复制，mysql 服务异常等 的 中间件。
但是有个 问题， gizzard 上的服务，还不够通用。 无法像 jdbc 提供的直接执行 jdbc 那么 通用。
是否有这样的框架，提供 在 gizzard 上，执行 SQL， 并返回相应的结果集
]]>
新的希望
]]>
点灯和防火
现在其实已经无所寻遁
是一种威慑
不要说话
也许也是一种进步
可以大声的说出来。
]]>
你会懂的
如果你看过那些内容
天地不仁以万物为刍狗。
]]>
18. 郭德纲：秦香莲快步登上开封府的台阶，来到府衙的堂鼓面前，奋力抡起鼓槌，大喊，冤枉啊------，旁边冲出一群大汉，把秦香莲按倒在地，挥拳便打，秦 香莲哭道，大哥我冤枉，大汉劈面就是一掌骂道，你冤枉个屁，你不知道喊冤违法吗？冤死你都不能喊，妈的，你以为这是封建社会啊，有冤就喊，还有清官为你伸 冤！！
19.张鸣：刘锷的老残游记说晚清是一条船，有的人在拆船板，有的人在补漏洞，也有的人要炸船，当家人手足无措。我们现在也是在这样的船上，只是，很多当家人已经预定好了离开船的直升飞机。
20. 吴敬琏：中产阶级还很幼稚，对自己根本利益在哪里不清楚。以为我只要有一个房子，开豪华车，老婆孩子怎么怎么样，就行了。实际上如果社会不完善的话，个人 前途是没有保证。另外就是因为穷怕了，他就奔自己，想自己那个小家了，公民意识不够。公民就是这个国家的主人，好歹都跟你有关，都是你的责任！
1、@王克勤【何为真记者？何为假记者？何为黑记者】：中国70万新闻从业者均被称记者。而持记者证者仅十多万。有人说，有证者才是真记者，此谬 误。讲真话的新闻从业者，即真记者；讲假话的新闻从业者，即假记者，不管你是人民日报的还是CCTV的甚至是新华社的；凭记者身份，以报道名义违法犯罪 者，即黑记者。
2、最早发布“蚁族”报告的学者廉思，近日再次发布针对大城市高学历底层青年的报告：30岁以上的“蚁族”比例在增加。“出身于底层却又受过高等教育的青年，改变自身命运愈加艰难。”这是廉思得出的结论，“他们上升的渠道越来越窄”。
22、郎咸平：9.1是假的，通胀率6.2也是假的，起码16。好了就算这两个数据9%的GDP增长，6%的通货膨胀。你晓不晓得，GDP增长怎么 算的各位？9减掉6你懂不懂啊。实际增长率按照我们党的说法不3%......如果通胀是16%呢？GDP增长是多少？-7，各位。就这么严重。
23、 秦建中《“拼爹时代”中国青年的迷茫与彷徨》：在家乡、在二三线城市拚爹很难，而又不甘心在北上广当“蚁族”，在迷茫与傍徨中，这一代中国青年正面临着无 处可逃的社会困境。在权力织就的社会关系网下，贫穷二代已经丧失了改变命运的上升空间，社会阶层的逐渐固化对他关上了实现理想与抱负的大门。在这样的严峻 现实面前，逃离又逃回也只能是他们最后的归宿了。
]]>
1.人脱了衣服是禽兽，穿上衣服是什么？答：是衣冠禽兽。错！是教授。2.明知道你口袋里只有5元，却说你有10元的是谁？答：是骗子。错！是统计局3.某人现在月工资二千元，下个月一千七百。请问工资是降低还是增长？答：降低。错！是负增长。
7.美驻华大使馆发布的空气质量状况，与北京市环保局数据大有不同，引起争议。北京市环保局副局长杜少中对媒体回应称，美驻华大使馆监测的数值偏大，希望就检测方法、标准与其进行比对，但被拒绝。“他们也不愿意拿设备跟我们比对”。
17.【哲语】1、每个人的生命过程都可以像一截木头，不同之处在于你是选择熊熊燃烧，还是慢慢腐朽。 2、千万不要把知识和智慧混淆，知识教你如何生存，智慧告诉你如何生活。3、勤奋但不讲究效率的结果就是：笨鸟先飞，然后不知所踪。4、读书时，不可有己 见；读书后，不可无己见。
19.韩志国：80年代释放民心民意，靠自身努力改变命运的前景激发了整个社会的创造热情。90年代释放市场能量，资源配置市场化进程明显加快。 10年代释放国际资源，中国成全球化最大受益者。随着垄断加剧、信用丧失、权贵掠夺和贸易环境恶化，改革凝结的正能量日益变为负资产。
20. 张鸣《腐败PK制度》：晚清新政，经过苏报案之后，朝廷意识到了对于媒体不能用老办法管制。最后开放报禁，各种报纸兴起，纷纷把矛头对准官府，有点事就大 惊小怪地大肆报道。但说也奇怪，晚清到了新政时期，原本吏治已经相当腐败，到经过媒体的阵阵炮轰，不仅没有把政府轰垮，反而使得吏治逐渐变得好了起来。
]]>
9.有感于北大校长的《化学》歌，祖德贺一首《马屁也是化学》：马屁究竟是什么/就是马的屁/轻松了自己/污染了空气。拍马屁/有技巧/选准马/选时间 /选地点/勤奋拍/能升官/能发财。马屁 你原来如此神奇/马屁 你飘香万里/哦 兄弟姐妹/让我们一起拍/直到马被拍死/直到我们累死。
13.“谈恋爱要向班委汇报，领取情侣证书并派发喜糖；每月邀请异性到宿舍做客，人数不得低于4人；男女混搭一起吃饭，每月至少10次……”近日，广外一则另类班规在微博上迅速走红，该班班委表示，制定这样的班规是为了团结同学关系。
19.乾隆下江南，乌龟挡道。乾隆问:“王八们有何事上奏？”乌龟道:“我等有王八蛋进贡，欲求乌纱帽！”乾隆大笑:“好，哪日灯头朝下时，就让你等全部 当官。”看乌龟们叩谢而去。乾隆笑道：“这帮蠢王八，油灯烛头什么时候可以朝下？”臣子皆称圣明。转眼300年后，电灯取代了蜡烛，于是：君无戏言。
23.陈和午：近日，全球最大保险与资产管理集团安联发布《全球财富报告》称中国的富裕中产人数占了全球的1/4。中产数量的华丽数字与社会境况形成了鲜 明对此，“一套房子消灭一个中产，一场大病毁掉一个中产”已是不争的社会现实。 安联的报告只能被视为注水版的阶层结构，不要太迷恋传说。
]]>
1、北大博士冯军旗在县里挂职期间收集官员年龄、学历方面的造假证据；披露中县虚假政绩工程；甚至搜罗了1013名副科级及以上干部的简历，寻找他们升迁 的奥秘。“政治家族”随之浮出水面。他根据家族“出干部”数量，统计出21个政治“大家族”和140个政治“小家族”。（点评：这应该不是中国一个县的特 例，而很可能是普遍存在于中国各县、市、省的常态，以一推十，十及百，可谓蔚然大观。）
]]>这么简单易懂中学生倒背如流的理论规则，唯物主义者绝是不会做出这么比娱乐节目还娱乐的规定指令的，那不成了娱乐自己吗？
说实话，通过一道行政指令来调配节目单，在我看来，本身就是一项挺不道德的行为，因为这个举动僭越了一个法律流程。当然，在咱这里，法也不是最大的，行政 指令绕过法律流程就能够理解了。一些事情如果想不通，想一下原来是在中国，脑袋一拍也就通了。通过一种本不道德的手段妄图培养一个繁荣的道德社会，真是个 笑话。有点基本常识都知道：程序的不正义必然造就不出结果的正义。
任何一个社会的免疫力，绝不可能来自政府注射的疫苗，人人都有脑子不是傻瓜，都有自己的判断力和思维模式。当一档电视节目黔驴技穷的时候，必定是它寿终正 寝的时候，不会是调整一下播出时间或者换两个年轻的主持人就能挽回的，人们只会对此麻木，连恶心都不会了，最终选择用遥控器投票。有点智商的决策者不应当 借着“保护”的理由对此进行限制，而该放任自流，让每个人看穿、唾弃、远离。除非是，他从心底不相信他治下的人民，或者，根本就不希望他的人民有脑子。
还是那句话：一个肮脏的国家，必然人人开口闭口都是道德，不讲规则，愿意大肆铺张为道德造神，树立道德模范，结果伪君遍布；而一个干净的国家，则是每个人 都将规则贯彻至底的地方，他们每个人都明白，只有先有了规则，并且遵守规则，道德自会产生并被维护。大了于一个国家如此，小了于一张限娱令如此。
咦，怎么那么像几十年前树人先生形容他们说的话：满嘴仁义道德，一肚子男盗女娼。这句便是给一张限娱令死穴的最好注脚。
]]>简单图的管理
1 可以用来描述好友关系
2 可以用来表示和属性的关系
a 在c1 上班， b 也在 c1 上班， 那就是 a 和 b 有一个间接的关系
这个 比较 适合 属性的值是确定的没有歧义的情况，
但 现实的时间没有这么简单， 一个 属性值可能会有多个近似的值， 或者和时间变迁有关的值
同时 也不能适用于 太宽泛的 属性值
最好能将人 归类到 10万 这个一个数量级
]]>
SortedMaps are sorted on the keys), you could use something like this:
Map("foo"->3, "raise"->1, "the"->2, "bar"->4).toList sortBy {_._2}
Result would be the list of key/value pairs sorted by the value:
List[(java.lang.String, Int)] = List((raise,1), (the,2), (foo,3), (bar,4))
There is a Map type that retains the original order, ListMap, if you apply this, you have a map again:
import collection.immutable.ListMap
ListMap(Map("foo"->3, "raise"->1, "the"->2, "bar"->4).toList.sortBy{_._2}:_*)
Then you have:
scala.collection.immutable.ListMap[java.lang.String,Int] = Map((raise,1), (the,2), (foo,3), (bar,4))
盛世如何安生立命？
]]>进行hash 后在查表
并没有使用 gizzard 的 按照 range 分区 进行查找
id -> hash ; 再根据 hash值， 在 treeMap 中 查找 floorEntry ; 然后找到实际对应的表
而且
最后有一步
// trim to 60 bits for gizzard.
这样 实际的 id 范围在 0~ 2^60
所以
demo 中的
gizzmo -T -99,99 create-table --base-name=edges --shards=10 1 "com.twitter.gizzard.shards.ReplicatingShard(1) -> com.twitter.flockdb.SqlShard(localhost,1,INT UNSIGNED,INT UNSIGNED)"
得到的数据 分区是115292150460684697FnvHasher 均布性 比较好 0～10000000 ； 分成10个分区后的 分布情况 偏差 50/1000000 ; 2万分之1 Map( edges_88_0005_replicating -> 1000016, edges_88_0001_replicating -> 999982, edges_88_0008_replicating -> 1000221, edges_88_0006_replicating -> 1000081, edges_88_0007_replicating -> 999911, edges_88_0002_replicating -> 999888, edges_88_0000_replicating -> 1000048, edges_88_0004_replicating -> 999869, edges_88_0009_replicating -> 999952, edges_88_0003_replicating -> 1000033)
807045053224792879
230584300921369394
1037629354146162273
922337203685477576
345876451382054091
0
461168601842738788
576460752303423485
每个 分区的大小是
115292150460684697
(2L << 60)/10/2 10 是10个分区 2 ? 不知道，
文档阿 文档
]]>
flockdb 的实际的逻辑是 是在 SqlShard
中执行的。
计算 交集 并集 等 可能会有问题
需要 如果 分布在不同的 数据库服务器上 。
EdgesService 这个 可能才是 完整的类
和 thrift 接口 定义的 实现类
]]>
forword
backword
1 文档太少；
2 代码中 基本 没有注释
config/development.scala 这种 模式 可以 正常 运行的java 客户端
在 product 环境下 ；
出现
FAT [20111016-14:41:23.862] server: Read an invalid frame size of -2147418111. Are you using TFramedTransport on the client side?
3 最大的问题， product 环境下， 有奇怪的问题
flockDB 不是一个好的选择？
]]>
Changing the log level is simple; modifying other portions of the configuration will pose a more in depth approach.
LogManager.getRootLogger().setLevel((Level)Level.DEBUG);
The changes are permanent through the life cyle of the Logger. On reinitialization the configuration will be read and used as setting the level at runtime does not persist the level change.
http://stackoverflow.com/questions/4598702/dynamically-changing-log4j-log-level
LogManager.getRootLogger().setLevel((Level)Level.DEBUG);2 用 scala 来编写 action 类
3 用 scala 来编写 service 类
]]>
原来的处理是 直接在 主干中 调用 相应的 业务代码
不考虑 速度 ， 附加处理可能引起的异常， 直接调用的方法是最简单的。
引入 MQ , 系统更加复杂。
其实很早以前就用过 JMS 系统，用来实现数据的同步。
在 目前的规模和阶段引入 MQ 还不太合适？
如果用 通过spring 来 引入 RabbitMq ; 有个问题， 需要引入 spring 3.0
而系统目前是采用 spring 的2.5的
引入 MQ 还需要 有 服务端的 硬件设备
]]>
注意，它是从网络层开始的， 不是一般意义的 web开发架构，
他是全栈式的。
不采用 servlet/jsp 那一套东西。
完全是自己搞了一套
参考他的文档，编写一个 博客程序，非常容易，估计一天就能搞定。
目前正在用 scala 开发 play 2.0
他提到一点，为什么要用 scala ; 很强的类型约束，可以在编译期间进行完全的检查。
]]>
这次是对 scala 有了一知半解后看的。
还是没有看明白
不清楚 lift web 为什么要引入 这么多东西？ ( 也许 struts spring 这些框架，也引入了很多东西，只不过已经习惯了， 仿佛它原来
就是这样的 。 )
lift web 的 hello world 确实很简单，也能看懂。
但是如何 入手，写实际的程序呢？
一定要写过一个实际用的程序， 才能明白。
lift web ; 更多是从 程序员的角度出发，来看待网站的构建
很严谨 ；
但是 我最有 疑问的是， html 的代码，一部分是在 程序中编写的。
也许从 lift web 的角度 ， 已经做了分离
]]>
面向对象和 面向函数式的混合语言
在 对象的基础上，提供了良好的 函数式编程的体验
静态类型的，很强的静态类型 ； 能够定义 复杂的类型约束；
但是也足够灵活，具有类型推断能力；
语言的表达能力和 动态语言有的一拼。
函数式编程 很好 很强大；但很难用； 特别是 简单的web 网站中， 可能用于后端的基础系统的建设，更合适
Actor 处理并发问题
推荐使用 val ;
函数也是对象， 是对象的实例。
代码可以是 高度精简的， 没有训练过，比看java 代码还有累； （ 可能是因为你已经适应了 java 代码的表达方式，
一时还无法适应 scala 的 表达方式 ）
从代码的书写上，确实比 java 简洁； 同时用他提供的类库，有些事情非常简洁
val x = List (1,2,3,4)
x.foreach(println)
{code}
println(“hello world")
{code}
val var
可变，不可变
函数是一等公民
val f = (x:Int) => x+1
我感觉 缺少的地方
持久化 层，缺乏一个强有力的产品； （ 可以直接使用 java 目前已有的方式）
依赖管理，缺乏一个 产品； （ 按照scala 的描述， scala 自己可以解决 依赖管理问题， ）
]]>
更快的开发速度；更快的运行速度
种种新奇的的东西？
scala 代表了语言的未来的方向吗？
基于 scala语言的框架会成功吗？
强类型，编译时检查；很陡的学习曲线？
很难找到 掌握/精通 scala的人
目前的系统主要还是基于 struts 1 的。
好像也运行的不错。
用 旧瓶装新酒 是否可能？
引入新的框架 需要 考虑和 现有的 代码如何 共处
现有的代码如何向新的架构演进？
引入新的架构，究竟会有什么样的好处？
比较酷，比较炫？ 底层的东西，没有会关心的。
开发的效率，运行的速度，才是有人关心的。
维护，可维护也是一个 重要的指标。
目前的结构，还是 很适应 现状的。
]]>
39万亿 * 4% = 1.56万亿
这里的主要问题是， 总数是高的。
但分布是不均匀的。
这才是问题的关键， 一小撮人，占据了大量的公共资源！！！
]]>
杜牧描写了阿房宫里建筑的广延、女人的众多和珍宝的堆积后，说道：
“嗟乎，一人之心，千万人之心也。秦爱纷奢，人亦念 其家。奈何取之尽锱铢，用之如泥沙！使负栋之柱，多于南亩之农夫。架梁之椽，多于机上之工女。钉头磷磷，多于在庾之粟粒。瓦缝参差，多于周身之帛缕。直栏 横槛，多于九土之城郭。管弦呕哑，多于市人之言语。使天下之人，不敢言而敢怒。独夫之心，日益骄固。戍卒叫，函谷举。楚人一炬，可怜焦土。”
褒城（今陕西勉县东北）驿站号称天下第一，但孙樵发现它破落得一塌糊涂。找了驿吏来问，驿吏说，当初整修后，确实很壮观。但是，“且一岁宾至者，不下数百 辈，苟夕得其庇，饥得其饱，皆暮至朝去，宁有顾惜心耶？至如棹舟，则必折篙破舷碎鹢而后止；渔钓，则必枯泉汩泥尽鱼而后止；至有饲马于轩，宿隼于堂，凡所 以污败室庐，糜毁器用。官小者，其下虽气猛，可制；官大者，其下益暴横，难禁。由是日益破碎，不与曩类。某曹八九辈，虽以供馈之隙，一二力治之，其能补数 十百人残暴乎？”
]]>