锐客网

  1. 首页 > 睿知 > it技术 > >

php队列数据 php栈与队列的区别( 六 )

IT技术猴子


5.4 Kafka
Kafka是一种高吞吐量的分布式发布订阅消息系统，它可以处理消费者规模的网站中的所有动作流数据 。这种动作（网页浏览，搜索和其他用户的行动）是在现代网络上的许多社会功能的一个关键因素 。这些数据通常是由于吞吐量的要求而通过处理日志和日志聚合来解决 。对于像Hadoop的一样的日志数据和离线分析系统，但又要求实时处理的限制 ， 这是一个可行的解决方案 。Kafka的目的是通过Hadoop的并行加载机制来统一线上和离线的消息处理 ， 也是为了通过集群机来提供实时的消费 。
Kafka是一种高吞吐量的分布式发布订阅消息系统，有如下特性：
通过O(1)的磁盘数据结构提供消息的持久化，这种结构对于即使数以TB的消息存储也能够保持长时间的稳定性能 。（文件追加的方式写入数据，过期的数据定期删除）
高吞吐量：即使是非常普通的硬件Kafka也可以支持每秒数百万的消息 。
支持通过Kafka服务器和消费机集群来分区消息 。
支持Hadoop并行数据加载 。
Kafka相关概念
Broker
Kafka集群包含一个或多个服务器，这种服务器被称为broker[5]
Topic
每条发布到Kafka集群的消息都有一个类别，这个类别被称为Topic 。（物理上不同Topic的消息分开存储，逻辑上一个Topic的消息虽然保存于一个或多个broker上但用户只需指定消息的Topic即可生产或消费数据而不必关心数据存于何处）
Partition
Parition是物理上的概念，每个Topic包含一个或多个Partition.
Producer
负责发布消息到Kafka broker
Consumer
消息消费者 ， 向Kafka broker读取消息的客户端 。
Consumer Group
每个Consumer属于一个特定的Consumer Group（可为每个Consumer指定group name，若不指定group name则属于默认的group） 。
一般应用在大数据日志处理或对实时性（少量延迟），可靠性（少量丢数据）要求稍低的场景使用 。
thinkPhp使用框架自带队列think-queue由于框架版本原因可以选择适合的版本
composer require topthink/think-queue
由于我是tp框架5.1的，所以选择了think-queue 1.1.6
composer require topthink/think-queue 1.1.6
判断安装成功
php think queue:work -h
看了网上其他的一些帖子说配置文件在统一目录下/config/queue.php
但是，我这边没有生成 ， 但是根据Queue.php源码可以看出，配置是在config.php文件中的一个键值对
数据表默认数据
php数组如何实现循环队列1.PHP基本上就是一种数组语言 。时常要进行大量的数组循环操作php队列数据 ， 主要有两种方式php队列数据，
一种是foreachphp队列数据，另一种是while，
代码如下php队列数据：
foreach ($array as $value) {
echo $value;
}
while (list($key) = each($array)) {
echo $array[$key];
}
foreach ($array as $value) {
echo $value;
}
while (list($key) = each($array)) {
echo $array[$key];
}
2.在循环里进行的是数组“写”操作，则while比foreach快php队列数据：
foreach ($array as $key = $value) {
echo $array[$key] = $value . '...';
}
while (list($key) = each($array)) {
$array[$key] = $array[$key] . '...';
}
foreach ($array as $key = $value) {
echo $array[$key] = $value . '...';
}
while (list($key) = each($array)) {
$array[$key] = $array[$key] . '...';
}
PHP SplQueue 队列用法在PHP中，我们可以用array来简单模拟队列的功能，array_push出列，array_pop入列，但是更高效的用法还是要使用SplQueue这个官方提供的队列类来做，记录一下简单的用法 。

推荐阅读


上一篇：穷人拍摄视频怕什么，穷人生活视频剪辑

下一篇：包含xml怎么变成PPT的词条