linux
未读mysql5.7
安装mysql yum源12wget dev.mysql.com/get/mysql-community-release-el6-5.noarch.rpmyum install mysql-community-release-el6-5.noarch.rpm
安装msqyl
选择启用mysql5.712vi /etc/yum.repos.d/mysql-community.repo## 找到5.7 修改 enable=1
1yum install mysql-community-server
启动mysql1service mysqld start
开机启动12chkconfig --list | grep mysqldchkconfig mysqld on
设置默认编码123vim /etc/my.cnf[mysqld]character-set-server=utf8 ### 加上这句
重启mysql1service mysqld restart
安装php7.0
添加yum源12rpm -Uvh https://mirror.webtatic.com/yum/ ...
机器学习
未读Gensim中文词向量建模
自然语言处理
安装Gensim1pip install gemsim
分词安装1pip install jieba
建模word2vec
维基百科词库中文建模练习
wiki字库下载
资源下载页面地址: https://dumps.wikimedia.org/zhwiki/latest/
文件: https://dumps.wikimedia.org/zhwiki/latest/zhwiki-latest-pages-articles.xml.bz2
xml 文本抽取
使用Wikipedia Extractor抽取正文 123456git clone https://github.com/attardi/wikiextractor.git wikiextractorcd wikiextractorpython setup.py install./WikiExtractor.py -b 500M -o extracted zhwiki-latest-pages-articles.xml.bz2### -o extracted -o 制定输出目录 ...
机器学习
未读维基百科词库中文建模练习
wiki词库下载
资源下载页面地址: https://dumps.wikimedia.org/zhwiki/latest/
文件: https://dumps.wikimedia.org/zhwiki/latest/zhwiki-latest-pages-articles.xml.bz2
下载后解压得到xml文件
xml 文本抽取
使用Wikipedia Extractor抽取正文 123456git clone https://github.com/attardi/wikiextractor.git wikiextractorcd wikiextractorpython setup.py install./WikiExtractor.py -b 500M -o extracted zhwiki-latest-pages-articles.xml.bz2### -o extracted -o 制定输出目录 运行完查看目录抽取文件### -b 文件大小 默认是1M
繁简转换
1234brew install openccopencc -i wik ...
linux
未读
修改yum 123 rpm -Uvh https://dl.fedoraproject.org/pub/epel/epel-release-latest-7.noarch.rpmrpm -Uvh https://mirror.webtatic.com/yum/el7/webtatic-release.rpmrpm -Uvh http://dev.mysql.com/get/mysql57-community-release-el7-9.noarch.rpm
安装php、mysql、nginx 123yum -y install nginxyum -y install mysql-community-serveryum -y install php70w-devel php70w.x86_64 php70w-cli.x86_64 php70w-common.x86_64 php70w-gd.x86_64 php70w-ldap.x86_64 php70w-mbstring.x86_64 php70w-mcrypt.x86_64 php70w-pdo.x86_64 php70 ...
git diffgit diff test master –show-onlygit diff test…master –name-statusgit diff test…master –stat
其他查看已经暂存起来的文件(staged)和上次提交时的快照之间(HEAD)的差异 git diff –cached git diff –staged
d、直接将两个分支上最新的提交做diff git diff topic master 或 git diff topic..master
e、输出自topic和master分别开发以来，master分支上的changed。 git diff topic…master
Changes that occurred on the master branch since when the topic branch was started off it
f、查看简单的diff结果，可以加上–stat参数 git diff –stat
–diff-filter=[(A|C|D|M|R|T|U|X|B)…[]] ...
linux
未读添加用户组1groupadd developer
添加用户并分配组1useradd -g developer developer
设置ssh登录免密码123456cd /home/developer/mkdir .sshchown -R developer:developer .sshcd .sshvi authorized_keys ### 加入公钥chown developer:developer authorized_keys ### 修改所属用户组，到此就可以用用户名免密码登陆了
禁用密码登录12345### 启用ssh验证 若为开启开启vi /etc/ssh/sshd_config ### 以下三行需要去掉#注释，没有就不用管#RSAAuthentication yes#PubkeyAuthentication yes#AuthorizedKeysFile .ssh/authorized_keys
找到 PasswordAuthentication yes 改为no
重启ssh服务1service sshd restart
普通用户添加root权限
vi /etc/ ...
linux
未读chmod
语法: chmod [who] [+ | - | =] [mode] 文件名
who :
u 表示“用户（user）”，即文件或目录的所有者。
g 表示“同组（group）用户”，即与文件属主有相同组ID的所有用户。
o 表示“其他（others）用户”。
a 表示“所有（all）用户”。它是系统默认值
= 操作符
添加某个权限。
取消某个权限。
= 赋予给定权限并取消其他所有权限（如果有的话
model
设置mode所表示的权限可用下述字母的任意组合：
r 可读。
w 可写。
x 可执行。
X 只有目标文件对某些用户是可执行的或该目标文件是目录时才追加x 属性。
s 在文件执行时把进程的属主或组ID置为该文件的文件属主。方式“u＋s”设置文件的用户ID位，“g＋s”设置组ID位。
t 保存程序的文本到交换设备上。
u 与文件属主拥有一样的权限。
g 与和文件属主同组的用户拥有一样的权限。
o 与其他用户拥有一样的权限。1234chmod u+rwx test.txtchmod g+rwx test.txtchmod a+r ...
wowza安装
软件WowzaStreamingEngine-4.7.7-linux-x64-installer.run
重启 service WowzaStreamingEngine restart
访问： http://ip:8088/enginemanager/
启动服务
12sudo systemctl status WowzaStreamingEnginesudo systemctl status WowzaStreamingEngineManager
Source Security 关闭验证
modules 配置包
copy包放入对应路径
lib目录/usr/local/WowzaStreamingEngine/lib
添加模块配置123456789Name Description Fully Qualified Class Namebase Base com.wowza.wms.module.ModuleCorelogging Client Logging com.wowza.wms.module.ModuleClientLoggingflvplayback ...
使用debezium binlog同步es
步骤
安装zookeeper
安装kafka
安装插件
kafka mysql binlog收集插件
kafka推送es插件
zookeeper安装、运行
下载
12345# 下载，（需要前置jdk运行环境）wget https://mirrors.tuna.tsinghua.edu.cn/apache/zookeeper/zookeeper-3.7.0/apache-zookeeper-3.7.0-bin.tar.gztar zxf apache-zookeeper-3.7.0-bin.tar.gz cd apache-zookeeper-3.7.0-bin
运行1234# 配置cp conf/zoo_sample.cfg conf/zoo.cfg# 单点不配置./bin/zkServer.sh start
kafka安装、运行
安装、运行12345# 下载，（需要前置jdk运行环境）wget https://mirrors.tuna.tsinghua.edu.cn/apache/kafka/2.8.0/kafka_2.1 ...
redis
未读REDIS HashHDEL
删除哈希表 key 中的一个或多个指定域，不存在的域将被忽略123456789101112131415161718192021222324252627282930313233# 测试数据redis> HGETALL abbr1) "a"2) "apple"3) "b"4) "banana"5) "c"6) "cat"7) "d"8) "dog"# 删除单个域redis> HDEL abbr a(integer) 1# 删除不存在的域redis> HDEL abbr not-exists-field(integer) 0# 删除多个域redis> HDEL abbr b c(integer) 2redis> HGETALL abbr1) "d"2) "dog"
HEXISTS
查看哈希表 key 中，给定域 field 是否存在1 ...
