1. 探索与利用

   强化学习与监督学习的不同：

   没有训练数据告诉机器应当做哪个动作，需通过尝试得出各个动作产生的结果，从而得到最终奖赏。

   最大化单步奖赏：

   • 需要知道每个动作带来的奖赏
   • 执行奖赏最大的动作

   算法背景：

   一般情况下，每个单步动作的奖赏值来自于一个概率分布，仅通过一次尝试不能确切地获得平均奖赏值。因此，单步强化学习任务对应了一个理论模型——K-摇臂赌博机。K-摇臂赌博机有K个摇臂，赌徒在投入一个硬币后可选择按下其中一个摇臂， 每个摇臂以一定的概率吐出硬币，但这个概率赌徒并不知道。赌徒的目...

“陈辉，你不该骗我的。”

上一次读王小波的作品已经是一年前了，两部小说都在同家书店邂逅，那时读《革命时期的爱情》还不懂小波，现在读《绿毛水怪》已然是慨叹不已。都说喜欢某个作家是因为他的作品能引起自己的共鸣，那么王小波的作品可以引起我肺腑轰鸣。从首次接触他的作品——《友谊地久天长》那时起，我就发现我和他一样，都是淡淡忧伤的浪漫主义者，小波喜欢将自己的感情写进书里，他的幻想，理想，不能说的秘密，都被文字表现的极富张力。

《绿毛水怪》便是最具代表性的此类了。

故事是从男主老陈，也就是陈辉，向作者讲...

参加过的一次华为软件精英挑战赛，虽然未能进入复赛，但是花费巨大精力码出长篇代码的酣畅淋漓感让我很难忘。赛题链接https://codecraft.huawei.com/Generaldetail
我的代码：

1
2
3
4
5
6
7
8
9
10
11
12
13
14
15
16
17
18
19
20
21
22
23
24
25
26
27
28
29
30
31
32
33
34
35
36
37
38
39
40
41
42
43
44
45
46
47
48
49
50
51
52
53
54
55
56
57
58
59
60
61
62
63
64
65
66
67
68
69
70
71
72
73
74
75
76
77
78...

首先导入需要的第三方库

1
2
3

import numpy as np
import matplotlib.pyplot as plt
from mpl_toolkits.mplot3d import Axes3D

然后创建数据集

1
2
3
4
5
6
7
8
9

dataSet = [[91, 85, 52, 2], [40, 55, 13, 1], [41, 36, 93, 4], [52, 10, 63, 4], [1, [52, 74, 40, 2], [70, 7, 1, 1], 
	 [94, 97, 82, ...

提纲

• NoSQL简介
• NoSQL兴起的原因
• NoSQL与关系数据库的比较
• NoSQL的四大类型
• NoSQL的三大基石
• 从NoSQL到NewSQL数据库
• 文档数据库MongoDB

NoSQL简介

从最初表示的“反SQL”运动，用新型的非关系型数据库取代关系型数据库，发展为现在表示关系和非关系型数据库各有优缺点彼此都无法互相取代，即“Not only SQL”。

通常，NoSQL数据库具有以下特点：

• 灵活的可扩展性
• 灵活的数据模型
• 与云计算紧密融合

NoSQL兴起的原因

• 关系数据库已经无法满...

从哲学层面看

​ 空间与时间一起构成运动着的物质存在的两种基本形式。空间指物质存在的广延性；时间指物质运动过程的持续性和顺序性。空间和时间具有客观性，同运动着的物质不可分割。没有脱离物质运动的空间和时间，也没有不在空间和时间中运动的物质。空间和时间也是相互联系的。现代物理学的发展，特别是相对论，证明空间和时间同运动着的物质的不可分割的联系。

从运动着的万事万物表达的层面看

• 时间维（T）

  指地理信息随时间变化，具有时态性，需要有一个精确的时间基准。

• 空间维（S-XYZ）

  指地理信息具有精确的...

何谓时空大数据平台

​ 时空大数据平台是把各种分散的（点数据）和分割的（条数据）大数据汇聚到一个特定的平台上（时空数据或地理框架数据平台），通过数据多维融合和关联分析与数据挖掘，揭示事物的本质规律，对事物做出更加快捷、更加全面、更加精准和更加有效的研判和预判，从而使之发生持续的聚合效应。

“通用时空大数据平台+”模式

• 通用时空大数据平台：

  “大数据”之“大”就在于将各种分散的数据彼此联系，由“点”而“线”，由“线”而“面”，由“面”而“层次”，以形成更完整的覆盖面，更清楚的理解事物的本质和未来的趋...

人生参加的第一次招聘，遇到一道不错的好题分享给大家：
求数组[6,3,1,2,5]中最长的数值连续子序列的长度
本人答案如下：

1
2
3
4
5
6
7
8
9
10
11
12
13
14
15
16
17
18
19
20
21
22
23
24
25
26
27
28
29
30
31
32
33
34
35
36
37
38
39
40
41
42
43
44
45
46
47
48
49
50
51
52
53
54
55
56

import numpy as np


def mergeSort(lyst):
    copyBuffer = np.zeros(len(lyst), dtype=int)
    mergeSortHel...

很可能某些功能因为下载失败而不存在。 在这种情况下，根据karaf上的错误消息，将在Eclipse文件夹中删除项目的相应功能，然后重新建立该项目，以便该项目可以自动下载并再次添加功能。 将有很大的机会解决这个错误。