VideoCache - Cache do YouTube e outros.

[Josue Guedes]

Boa noite a todos.

Pela indicação do Sergio, instalei e testei "VideoCache" apresentado neste site:

VideoCache - Cache Videos Using Squid | Cache Videos

A instalação foi muito simples aqui no CentOS, executei um arquivo RPM, e segui as instruções de instalação, o cache está funcionando perfeitamente, segue o log que o próprio vídeo cache gera.

Como instalei ontem mesmo, até agora ele está na maioria das vezes gravando os vídeos, já que a maioria dos usuário vêem o vídeo e depois verão um outro.

O VideoCache cria o diretório em /var/spool/videocache/ onde tem sub-diretório com os sites que ele trabalha.

Todas as informções estão muito clara no site. Fácil, Fácil. Boa sorte a todos, e postem suas experiências.

[sergio]

mamão com açúcar né?

hehehehee


Realmente esta versão rpm é muito simples de instalar e configurar.

De qualquer forma o João Eriberto Mota Filho já colocou a mão na criança... Está montando o pacote deb, bonitinho de acordo com os padrões do Debian e já já estará pronto (se não estiver, equanto eu digito aqui).

[Josue Guedes]

Deposis ai, dá uma olhada na Interface LO, pelo que entendi, para gravar o tráfego passa por ela, agora para sair não cheguei a ver como é, só vi o log.

[Pirigoso]

to usando o ECACHE do rodrigo e o biazus, simplesmente perfeito sem falar nos futuras possibilidades de incluir o redtube e outros com host dinámico

[Magal]

Josue, tinha que da certo, dica do Sérgio e CentOS.

[Josue Guedes]

to usando o ECACHE do rodrigo e o biazus, simplesmente perfeito sem falar nos futuras possibilidades de incluir o redtube e outros com host dinámico

Eu li muito sobre o projeto deles, é mais completo, pois tem até para anti-vírus. Porém esse aqui é muito, fácil de instalar. Vou expeirmentar esse do Biazus, vou montar um servidor de teste aqui.

[Josue Guedes]

Josue, tinha que da certo, dica do Sérgio e CentOS.

É, com certeza.

[FernandodeDeus]

Tem que ser montado em uma maquina dedicada?

[Josue Guedes]

Tem que ser montado em uma maquina dedicada?

Tem que ser em uma máquina baseada em Debiam ou RedHat com Squid, acho que não prescisa ser dedicada, mais, saiba que o consumo de disco é grande, aqui em 2 dias já estou com 3 giga de cache feito. Vou testar com parent proxy para ver como fica com Mikrotik.

[osmano807]

Ah, quando o usuário vai acessar o youtube, ele mostra o vídeo normal e o baixa em paralelo ou tem que esperar o download do vídeo terminar?

[Josue Guedes]

A formação do cache acontece em paralelo ao que o usuário está vendo, se o usuário desitir ele parece que continua fazendo o cache, sinceramente eu ainda estou confirmando se é isso mesmo, pelo log que eu postei dá para ter uma idéia do que acontece. Vamos esperar mais gente começar a usar para poderem ajudar nas configurações. Eu limitei a formação de cache a 1 por vez.

[Giovani.couto]

Olá Sergio!
Como vai essa força ai ?!

Muito Boa a sua dica, é D+ !

Coloquei no meu slackware e o troço ta fucionando que é uma beleza!

Abraços

mamão com açúcar né?

hehehehee


Realmente esta versão rpm é muito simples de instalar e configurar.

De qualquer forma o João Eriberto Mota Filho já colocou a mão na criança... Está montando o pacote deb, bonitinho de acordo com os padrões do Debian e já já estará pronto (se não estiver, equanto eu digito aqui).

[Giovani.couto]

Olá Amigo!
Pelo que pude ver este tambem faz isso que mencionaste !
Abraços

to usando o ECACHE do rodrigo e o biazus, simplesmente perfeito sem falar nos futuras possibilidades de incluir o redtube e outros com host dinámico

[Giovani.couto]

Olá pessoal!

Bom depois de me entusiasmar com os colegas do fórum, ontem decidi colocar em pratica este tutorial!

Meu servidor Linux Slackware 12.0 se utilizava do Squid 3.0 STABLE7, mas como não vi nenhuma referencia a este resolvi desinstalar ele e colocar a versão 2.6 STABLE5

Depois verifiquei se o Python e o Apache2 estavam instalado nele!
Feito isso baixei os pacotes que faltavam !

Escolhi: urlgrabber-2.9.4.tar.gz, videocache-1.6.tar.gz, iniparse-0.2.4.tar.gz

Depois de instalados tive que mexer em algumas configs do pacote Videocache

e corrigir algumas coisa nas configurações do meu apache e Squid, deu um pouco de trabalho já que o mais fácil e debian mesmo pois já não e tudo na mão como Slackware.

Já faz 12 horas e já tem 11GIGA de cache alocado pelos vídeos, mas percebi que nenhum vídeo do Google foi cacheado, alias os únicos que foram foi youtube, youporn e redtube.

Acho que da pra melhorar estes scripts!

Agora com o BBB 9, poderíamos adicionar também neste videocache !!!

Abraços A todos deste tópico !

[Josue Guedes]

É aqui o cache já cresceu bem, já estou com quase 100 Gigas, mais estou tendo a impressão que o vídeos estão sendo duplicados no cache, vai também para o cache do squid, alguém pode confirmar isso? O cache squid passou a crescer muito depois do videocache, tentei configurar o squid para não fazer cache do You tube por exemplo, mais parou de funcionar o videocache, vou dar uma analisada aqui no log e retorno para confirmar.

[Giovani.couto]

Fiz um egrep no log do vedeocache nos HIT (acertos do cache ) e nos MISS ( quando e buscado na internet) e fazendo uma regra de três cheguei a conclusão que naquele momento estava dando 44% de efetivo do videocache, ao meu ver a médio prazo com dois hd de 1 tera seria uma solução sustentável pois não e necessário limpar o diretório dos vídeos já que ele procura pelo nome! A gama de videos do youtube e muito grande! Quanto mais pudermos cachear melhor fica na economia do link !

Mas acho que com o videocache não tem como colocar 2 hd de 1 tera como se faz no squid ! E também não tem como dividir em subpastas portanto quanto mais arquivos no diretório mais lenta vai ser a procura do vídeo , já imaginou um diretório com 10mil vídeos ? Quanto tempo será que leva pra achar ele !!!!

Abraços Josue.

[sergio]

Fiz um egrep no log do vedeocache nos HIT (acertos do cache ) e nos MISS ( quando e buscado na internet) e fazendo uma regra de três cheguei a conclusão que naquele momento estava dando 44% de efetivo do videocache, ao meu ver a médio prazo com dois hd de 1 tera seria uma solução sustentável pois não e necessário limpar o diretório dos vídeos já que ele procura pelo nome! A gama de videos do youtube e muito grande! Quanto mais pudermos cachear melhor fica na economia do link !

Mas acho que com o videocache não tem como colocar 2 hd de 1 tera como se faz no squid ! E também não tem como dividir em subpastas portanto quanto mais arquivos no diretório mais lenta vai ser a procura do vídeo , já imaginou um diretório com 10mil vídeos ? Quanto tempo será que leva pra achar ele !!!!

Abraços Josue.

Configura um raid0. Estou usando desse jeito em uma maquina que montei pra testes com o videocache. Está funcionando por enquanto, mas ainda nãoo deu tempo de analisar a performance utilizando em raid (nao é recomendado pela equipe do squid)

[Bruno]

Sobre o Ecache
estou usando aki a varios meses
tudo perfeito
se o cliente desistir de assistir o video o squid condinuara fazendo o download do video
mais é uma solução otima
recomendo
pra quem quizer saber mais

Forum Proxy Masters • Index page

[Josue Guedes]

Configura um raid0. Estou usando desse jeito em uma maquina que montei pra testes com o videocache. Está funcionando por enquanto, mas ainda nãoo deu tempo de analisar a performance utilizando em raid (nao é recomendado pela equipe do squid)

Também dei uma olhada aqui nos logs, paraticamente não aparece nada no log do squid referente aos vídeos. Então acho que não deve estar duplicando. Quanto incluir novos discos acho que você pode dividir por sites, agora 2 discos para o Youtube por exemplo não dá mesmo, pelo menos nesta versão. Essa questão de desempenho serámesmo que deve ser considerada? Já fiz tantos testes nisso aqui, usei 1 diretório 2 e 3 e sinceramente não vi diferenças. Acho que isso é para extruturas mais antigas, as máquinas hoje sõa muito rápidas. Me corrijam se eu estiver errado.

[osmano807]

Existe alguma maneira de portar para Windows 2003 + cygwin?