Kafka 基础知识笔记

Kakfa 起初是由 LinkedIn 公司开发的一个分布式的消息系统，后成为 Apache 的一部分，它使用 Scala 编写，以可水平扩展和高吞吐率而被广泛使用。目前越来越多的开源分布式处理系统如 Cloudera、Apache Storm、Spark 等都支持与 Kafka 集成。体系架构生产者使用 push 向 broker 发送消息，消费者使用 pull 模式拉取并消费消息 producer 可能是服务器日志，业务数据 broker 消息中间件节点，支持水平扩展，一般 broker 数量越多，集群吞吐率越高 consume Read more ...

2018-05-29 Kafka , linkedin , message , broker

SSH 端口转发

SSH 全称 Secure Shell，是一种加密的网络传输协议，可以在不安全的网络中为网络服务提供安全的传输环境。几个 ssh 命令的参数 C 压缩数据传输 -f 后台登录用户名密码，如果省去该参数 ssh 会一直等待 -g 允许打开的端口让远程主机访问 -N 不执行shell -T 表示不为该连接分配TTY -p 后接端口本地端口转发本地端口转发，就是将发送到本地端口的请求，转发到目标主机端口。 ssh -L 本地网络地址：本地端口：目标主机地址：目标端口 root@<主机地址> ssh -L l Read more ...

2018-05-28 ssh , port , forward , linux

每天学习一个命令：netcat 查看网络信息

nc 是 netcat 的简称，nc 工具是一个 TCP/IP 的瑞士军刀类型的工具，netcat 可以使用 TCP 或者 UDP 协议来进行网络连接的读写诊断，nc 命令可以用于 TCP，UDP，Unix 套接字相关的任何事情，是一个非常强大的网络工具。端口是 Linux 机器上的应用、服务、进程与网络进行通信的端点。常用的 netstat 或者 nmap 等也能够列出本地机器上的开放端口。但是 nc 可以用来确定远程主机端口是否开放。安装 sudo apt install netcat 使用实例监听本地端口 nc -l -p 80 Read more ...

2018-05-28 netcat , nc , linux , tcp , udp , command , netcat , port-scan , security

如何为视频配上合适的背景音乐

电影电视剧配乐一直都是一门学问，我一直很好奇韩剧或者韩综的配乐，如何能做到用音乐去推进故事，用音乐是暗示结局。但其实本文就是罗列了几个收集音乐的好地方，本不求达到那么专业的水平，只求在日常vlog或者短片中找到合适的BGM。 SoundCloud SoundCloud 是一个在线音乐分享平台，上面有无数的音乐人作品，但是使用的时候请一定遵照版权。 https://soundcloud.com/ 几个账号 https://soundcloud.com/freemusicforvlogs icons8 这是 icons8 推出的免费 Read more ...

2018-05-28 music , youtube , soundcloud , sound , bgm , video

搬家整理之术收纳之术

最近要搬家，最初的需求就是快速打包搬走，想要找一些比较好用的搬家神器，搬家神器倒是没找到，不过找到了一些日常收纳整理之术。平时如果注重收纳整理，知道断舍离，其实搬家也远没有那么的痛苦。可能提到搬家很多人会想到小推车，收纳箱等等用于收纳的物品，当然这些都是日常生活中必不可少的。即使不搬家，在家中使用收纳箱收拾平时不穿的鞋子，衣服等不仅能够防潮，也方便了快速分类整理。下面也不多废话，就直接把我整理过程中觉得比较有用的记录下来。收纳想要打包的时候加快速度，那就一定成都上依赖于平时的收纳，我自己平时本没有那么注意收纳，因此在打包时格外的零碎，各种文件， Read more ...

2018-05-26 thought , sort-out , moving , clean-up

RabbitMQ 基本使用

RabbitMQ 是一个使用 Erlang 编写的消息队列的实现，能够接收并转发消息。 RabbitMQ is open source message broker software (sometimes called message-oriented middleware) that implements the Advanced Message Queuing Protocol (AMQP). The RabbitMQ server is written in the Erlang programming language and is bu Read more ...

2018-05-25 rabbitmq , message , broker , queue

每天学习一个命令：ip 处理网络管理任务

linux中的ip命令和ifconfig类似，但前者功能更强大，并旨在取代后者。ifconfig是net-tools中已被废弃使用的一个命令。iproute2 套件里提供了许多增强功能的命令，ip命令即是其中之一。只需一个ip命令，就能很轻松地执行一些网络管理任务。常见用法给机器设置一个IP地址 sudo ip addr add 192.168.0.193/24 dev wlan0 列出路由表条目 ip route show 显示网络统计数据 ip -s link Read more ...

2018-05-22 network , linux , command , ip , ifconfig

Flask 使用 Celery 避免循环引用

在 Flask 中使用 Celery 官方给出了一个非常详细的教程，可是这个教程中有一点没有讲清楚，就是关于引入了 Celery 之后如何在项目中划分模块以及模块之间的相互调用，我们知道 Flask 用于构建比较大的项目时可能会使用到 blueprints，而这个时候项目结构可能就比较复杂了。而引入 Celery 直接面临的问题是如何初始化 Celery 实例，在创建 Flask app 的同时创建 Celery 实例，这时候就面临一个问题，通常我们都在 Views 中引用 celery 异步任务，不可避免的会导致，需要在 views 中 impor Read more ...

2018-05-21 flask , celery , python , import

斐讯 k3 刷机教程

k3 的折腾记录降级我的固件版本 V21.6.12.66 只要两步，WEB 直刷，就能降级第一步，下载提供的 K3_V21.6.11.58P 固件，并在 WEB 管理页面手动升级处，选择这个固件刷机第二步，选择欲降级到的固件比如 K3_V21.5.37.246，在 WEB 管理页面手动升级处，选择这个固件刷机，就可以降级到 K3_V21.5.37.246 K3_V21.6.11.58P 下载地址链接：https://pan.baidu.com/s/1rasSyjq 密码：ksxp K3_V21.5.37.246 Read more ...

2018-05-19 斐讯，phicomm , k3 , 刷机，router

个人非常喜欢的几个 icon 主题

我一直用的是 Cinnamon 的桌面环境，使用 icon 主题也比较方便，这里就做个记录。 Papirus icon 地址： https://github.com/PapirusDevelopmentTeam/papirus-icon-theme 安装 sudo add-apt-repository ppa:papirus/papirus sudo apt-get update sudo apt-get install papirus-icon-theme Ultra flat icon 地址 https://githu Read more ...

2018-05-19 linux , icon-theme , unity , theme