15 replies to this topic

[Stormbringer]

Opa galera,

é o seguinte, preciso fazer uma busca em um campo que pode estar gravado com htmlentities(não posso mudar isso)

de forma que
"eletrônico" fica gravado "eletrônico"

muito bem, minha busca funciona:

...
$busca2 = htmlentities($busca);
...
$busca_produtos = "select * from wfp_produtos where (nome like '%$busca%' or resumo like '%$busca%' or texto like '%$busca%' or nome like '%$busca2%' or resumo like '%$busca2%' or texto like '%$busca2%')and desativa='0' $outras";

ja que previ e converti a string a ser buscada pra htmlentities também...


mas surgiu um problema:
em campos gravados normalmente, sem htmlentities, por exemplo "eletrônico"... se eu busco, com "like" por "eletronico"(sem acento), ele me da o resultado com e sem acento(como eu quero)... porem, gravado com htmlentities, ele só me retorna o resultado se eu busca-lo com o acento, ele nao tem a mesma "tolerância"

existe alguma funçao (ou outra forma de fazer) no mysql, parecida com a função html_entity_decode do php, pra que eu possa fazer uma busca hipotetica como essa:

$busca_produtos = "select * from wfp_produtos where (html_entity_decode(nome) like '%$busca%')";

valeu galera!
lembrando que eu não tenho permissão pra trocar a forma de como o dado é gravado no BD, portanto eu tenho que trabalhar com o dado da forma como ele é...

Edição feita por: Stormbringer, 21/12/2010, 15:18.

[KILLME]

Não existe nenhuma função que converta entities no MySQL, o que você pode fazer é gravar direto com acento no banco.

[LeoB]

O jeito é comparar pelos dois.

WHERE nome LIKE '%$busca%' OR nome LIKE '%$busca2%'

[Stormbringer]

Não existe nenhuma função que converta entities no MySQL, o que você pode fazer é gravar direto com acento no banco.

infelizmente eu não tenho poder pra decidir como é a gravação, isso é de outra equipe e ja esta definido e homologado assim ... Burocracia de sistema grande, não gosto, ams tenhoq ue conviver, ehehhe... senão ja teria feito.

O jeito é comparar pelos dois.

WHERE nome LIKE '%$busca%' OR nome LIKE '%$busca2%'

nope vc nao entendeu... eu já busco por "entities" e sem "entities":
$busca_produtos = "select * from wfp_produtos where (nome like '%$busca%' or resumo like '%$busca%' or texto like '%$busca%' or nome like '%$busca2%' or resumo like '%$busca2%' or texto like '%$busca2%')and desativa='0' $outras";


o problema é que, se o cara digitar na busca "eletronico" eu quero que também ache o "eletrônico" e o "eletrônico"... se eu pudesse gravar sem o "entities" no bd, estaria resolvido, pois "eletronico" acha ëletronico" e "eletrônico"

mas enfim, vou ter que aumentar o escopo da busca pra prever todas as variaçoes de acentos e "ç" possiveis a partir da string digitada

mesmo assim, valeu galera

Edição feita por: Stormbringer, 22/12/2010, 10:35.

[LeoB]

Verdade, não tinha olhado pro final da query. Esse negócio de prever todas as possibilidades não vai ser bom. Na falta de uma função própria no mysql, o mais adequado é fazer a sua. Crie uma que decodifique os acentos. Assim você pode fazer a comparação. Ex:

... WHERE HTMLENTITIES_DECODE(nome) LIKE '%$busca%'

Sendo HTMLENTITIES_DECODE uma user function. Veja:

http://dev.mysql.com...-procedure.html

Um exemplo:

CREATE FUNCTION HTMLENTITIES_DECODE (s varchar(255)) RETURNS varchar(255) DETERMINISTIC NO SQL
BEGIN
    RETURN REPLACE(s, 'ô', 'ô');
END;

Pode pesar um pouco se os registros forem muitos, mas é o preço a ser pago por essa inconsistência no banco.

[Stormbringer]

LeoB, sua idéia é muito boa...

nao fosse pelo fato de, tanto no server de testes quanto no server de produçao, estarmos rodando mysql 4.x... esse lance de funçoes acho que foi implementado a partir do 5.0, né?
mas é mais facil eu sugerir atualizarem o mysql, que pedir pra trocarem a sistematica de gravação dos nomes dos produtos

valeu pela ideia!

up de resolução

no meu server de testes instalei o mysql 5
bom

select * from wfp_produtos where HTMLENTITIES_DECODE(nome) like '%eletronico%'

funcionou do jeito que eu queria... muito obrigado pela ideia, LeoB...
Agora só falta eu convvencer a gerencia de desenvolvimento a atualizar o mysql e permitir stores functions

/********/
la vou eu encher o saco com uma coisa básica

nao entendi como funcionam as funçoes mysql

DELIMITER //
CREATE FUNCTION HTMLENTITIES_DECODE (s varchar(255)) RETURNS varchar(255) DETERMINISTIC NO SQL
BEGIN
    RETURN REPLACE(s, 'ô', 'ô');
END;
DELIMITER;

legal, eu criei a funçao de testes que funciona só pra esse caso do ô, como teste

fui criar pra todas

DELIMITER //
CREATE FUNCTION HTMLENTITIES_DECODE (s varchar(255)) RETURNS varchar(255) DETERMINISTIC NO SQL
BEGIN
    RETURN REPLACE(s, 'Á', 'Á');
[...]
    RETURN REPLACE(s, 'ô', 'ô');
END;
DELIMITER;

obviamente, por causa do return, ele só faz a primeira linha... entao mudei

DELIMITER //
CREATE FUNCTION HTMLENTITIES_DECODE (s varchar(255)) RETURNS varchar(255) DETERMINISTIC NO SQL
BEGIN
    REPLACE(s, 'Á', 'Á');
[...]
    REPLACE(s, 'ô', 'ô');
 
    RETURN s;
END;
DELIMITER;

nao rola... como faço? não achei nenhum exemplo de tratamento de string assim em stored functions... eu sei que é elementar, mas realmente nao achei exemplos

[LeoB]

RETURN REPLACE(REPLACE(s, 'Á', 'Á'), 'ô', 'ô');

ou

SET s = REPLACE(s, 'Á', 'Á');
SET s = REPLACE(s, 'ô', 'ô');
RETURN s;

[Stormbringer]

/****************************/


consegui

DELIMITER //
CREATE FUNCTION HTMLENTITIES_DECODE (s varchar(255)) RETURNS varchar(255) DETERMINISTIC NO SQL
BEGIN
    set s = REPLACE(s, 'À', 'À');	
[...]	
    set s =REPLACE(s, 'ô', 'ô');
RETURN s;
END;
DELIMITER;//

valeu

Edit: bem na hora que vc respondeu... obrigado denovo leob

agora com o prototipo funcionando, posso convencer os caras a aplicarem... pior que nem fez tanta diferença na performance da busca, quase nao se nota, e a tabela é beeeeeem populosa

/***************/
droga... mais um problema

essa busca, no phpmyadmin, me retorna resultados:

select * from wfp_produtos where (HTMLENTITIES_DECODE(nome) like '%dalmatica%' or HTMLENTITIES_DECODE(resumo) like '%dalmatica%' or HTMLENTITIES_DECODE(texto) like '%dalmatica%' or nome like '%dalmatica%' or resumo like '%dalmatica%' or texto like '%dalmatica%')and desativa='0' limit 0, 9

no sistema propriamente dito, não retorna nada....

se, em vez de "dalmatica" eu escrever so "dalma" funciona (o que procuro sao Dalmáticas)


o que sera que estou fazendo de errado?

trecho do codigo:

...
$buscaprod = "select * from wfp_produtos where (HTMLENTITIES_DECODE(nome) like '%$busca%' or HTMLENTITIES_DECODE(resumo) like '%$busca%' or HTMLENTITIES_DECODE(texto) like '%$busca%' or nome like '%$busca2%' or resumo like '%$busca2%' or texto like '%$busca2%')and desativa='0' $outras limit $_GET[inicio], $quantos";
...
$achaprod = mysql_query($buscaprod, $conexao);
...
  while ($produto=@mysql_fetch_assoc($achaprod)){
...

mysql_num_rows me retorna zero... acontece que, dando um echo na variavel $buscaprod, copiando e colando a query no phpmyadmin, ela rola... entao eu acho que tenho que escapar algum caractere ou "sei lá"


valeu

Edição feita por: Stormbringer, 22/12/2010, 14:07.

[LeoB]

Manda um or die(mysql_error()) no mysql_query().

---

A propósito, se você já está comparando o texto tratado pela função, não precisa comparar também sem o tratamento.

Edição feita por: LeoB, 22/12/2010, 14:20.

[Stormbringer]

pior que nao devolve erro... a query esta "certa" do ponto de vista sintático

veja, simplifiquei a query pra testes:

$buscaprod = "select * from wfp_produtos where (HTMLENTITIES_DECODE(nome) like '%$busca%')";

legal... no sistema, no campo de busca, digito:
"dalma"

e ele me acha todos os registros que contem palavra "Dalmática"

ja, se eu digito "dalmat" no campo de busca, me retorna ZERO resultados... o que é muito estranho

Debugando, mostrando com echo a string que executo a busca, copio, colo no phpmyadmin, e ela funciona com "dalma", "dalmat", "dalmatica", "dalmática"... enfim, todas as variações previstas funcionam... só no phpmyadmin

sera que eu tenho que "escapar" algo em algum lugar?(to tentando de tudo)

Edição feita por: Stormbringer, 22/12/2010, 14:35.

[LeoB]

Mostre como está a função que você fez.

[Stormbringer]

DELIMITER //
CREATE FUNCTION HTMLENTITIES_DECODE (s varchar(255)) RETURNS varchar(255) DETERMINISTIC NO SQL
BEGIN
 SET s = REPLACE(s, 'À','À') ;
 SET s = REPLACE(s, 'Á','Á') ;
 SET s = REPLACE(s, 'Â','Â') ;
 SET s = REPLACE(s, 'Ã','Ã') ;
 SET s = REPLACE(s, 'Ä','Ä') ;
 SET s = REPLACE(s, 'Å','Å') ;
 SET s = REPLACE(s, 'Ç','Ç') ;
 SET s = REPLACE(s, 'È','È') ;
 SET s = REPLACE(s, 'É','É') ;
 SET s = REPLACE(s, 'Ê','Ê') ;
 SET s = REPLACE(s, 'Ë','Ë') ;
 SET s = REPLACE(s, 'Ì','Ì') ;
 SET s = REPLACE(s, 'Í','Í') ;
 SET s = REPLACE(s, 'Î','Î') ;
 SET s = REPLACE(s, 'Ï','Ï') ;
 SET s = REPLACE(s, 'Ñ','Ñ') ;
 SET s = REPLACE(s, 'Ò','Ò') ;
 SET s = REPLACE(s, 'Ó','Ó') ;
 SET s = REPLACE(s, 'Ô','Ô') ;
 SET s = REPLACE(s, 'Õ','Õ') ;
 SET s = REPLACE(s, 'Ö','Ö') ;
 SET s = REPLACE(s, 'Ù','Ù') ;
 SET s = REPLACE(s, 'Ú','Ú') ;
 SET s = REPLACE(s, 'Û','Û') ;
 SET s = REPLACE(s, 'Ü','Ü') ;
 SET s = REPLACE(s, 'Ý','Ý') ;
 SET s = REPLACE(s, 'à','à') ;
 SET s = REPLACE(s, 'á','á') ;
 SET s = REPLACE(s, 'â','â') ;
 SET s = REPLACE(s, 'ã','ã') ;
 SET s = REPLACE(s, 'ä','ä') ;
 SET s = REPLACE(s, 'å','å') ;
 SET s = REPLACE(s, 'ç','ç') ;
 SET s = REPLACE(s, 'è','è') ;
 SET s = REPLACE(s, 'é','é') ;
 SET s = REPLACE(s, 'ê','ê') ;
 SET s = REPLACE(s, 'ë','ë') ;
 SET s = REPLACE(s, 'ì','ì') ;
 SET s = REPLACE(s, 'í','í') ;
 SET s = REPLACE(s, 'î','î') ;
 SET s = REPLACE(s, 'ï','ï') ;
 SET s = REPLACE(s, 'ñ','ñ') ;
 SET s = REPLACE(s, 'ò','ò') ;
 SET s = REPLACE(s, 'ó','ó') ;
 SET s = REPLACE(s, 'ô','ô') ;
 SET s = REPLACE(s, 'õ','õ') ;
 SET s = REPLACE(s, 'ö','ö') ;
 SET s = REPLACE(s, 'ù','ù') ;
 SET s = REPLACE(s, 'ú','ú') ;
 SET s = REPLACE(s, 'û','û') ;
 SET s = REPLACE(s, 'ü','ü') ;
 SET s = REPLACE(s, 'ý','ý') ;

RETURN s;
END;
//
DELIMITER;

vou limitar ela só no "á" pra testar


edit: nem mesmo tirando tudo e deixando so a parte do "á" rolou

Edição feita por: Stormbringer, 22/12/2010, 14:50.

[LeoB]

E se no campo de busca você colocar a palavra com acento? Funciona?

[Stormbringer]

E se no campo de busca você colocar a palavra com acento? Funciona?

finciona, por conta da segunda parte da query

...or nome like '%$busca2%'...

sem ela, nao funciona tambem (por isso eu mantive a redundância)

bem bizarro
fiz uma pagininha de testes rapida

<?
$conexao = mysql_connect("localhost", "xxxxxxxx", "xxxx");
mysql_select_db("xxxxxx", $conexao);
$queryc="select nome from wfp_produtos where (HTMLENTITIES_DECODE(nome) like '%$_GET[busca]%')";
echo $queryc;
$consultapagina = mysql_query($queryc, $conexao);

echo "<br>Numero de resultados: ".mysql_num_rows($consultapagina);
?>

mandando pra pagina a string a ser buscada por GET
"dalma" retorna o numero de resultados: 8, no caso
"dalmatica" retorna zero

contudo, copiando o $queryc que o echo printa e colando na execuçao de sql do phpmyadmin, acha os 8 resultados

/***************************/
resolvido...
em vez de substituir os entities pelos caracteres acentuados, eu fiz

DELIMITER //
CREATE FUNCTION HTMLENTITIES_DECODE (s varchar(255)) RETURNS varchar(255) DETERMINISTIC NO SQL
BEGIN
 SET s = REPLACE(s, 'À','A') ;
 SET s = REPLACE(s, 'Á','A') ;
 SET s = REPLACE(s, 'Â','A') ;
 SET s = REPLACE(s, 'Ã','A') ;
 SET s = REPLACE(s, 'Ä','A') ;
 SET s = REPLACE(s, 'Å','A') ;
 SET s = REPLACE(s, 'Ç','C') ;
 SET s = REPLACE(s, 'È','E') ;
 SET s = REPLACE(s, 'É','E') ;
 SET s = REPLACE(s, 'Ê','E') ;
 SET s = REPLACE(s, 'Ë','E') ;
 SET s = REPLACE(s, 'Ì','I') ;
 SET s = REPLACE(s, 'Í','I') ;
 SET s = REPLACE(s, 'Î','I') ;
 SET s = REPLACE(s, 'Ï','I') ;
 SET s = REPLACE(s, 'Ñ','N') ;
 SET s = REPLACE(s, 'Ò','O') ;
 SET s = REPLACE(s, 'Ó','O') ;
 SET s = REPLACE(s, 'Ô','O') ;
 SET s = REPLACE(s, 'Õ','O') ;
 SET s = REPLACE(s, 'Ö','O') ;
 SET s = REPLACE(s, 'Ù','U') ;
 SET s = REPLACE(s, 'Ú','U') ;
 SET s = REPLACE(s, 'Û','U') ;
 SET s = REPLACE(s, 'Ü','U') ;
 SET s = REPLACE(s, 'Ý','Y') ;
 SET s = REPLACE(s, 'à','a') ;
 SET s = REPLACE(s, 'á','a') ;
 SET s = REPLACE(s, 'â','a') ;
 SET s = REPLACE(s, 'ã','a') ;
 SET s = REPLACE(s, 'ä','a') ;
 SET s = REPLACE(s, 'å','a') ;
 SET s = REPLACE(s, 'ç','c') ;
 SET s = REPLACE(s, 'è','e') ;
 SET s = REPLACE(s, 'é','e') ;
 SET s = REPLACE(s, 'ê','e') ;
 SET s = REPLACE(s, 'ë','e') ;
 SET s = REPLACE(s, 'ì','i') ;
 SET s = REPLACE(s, 'í','i') ;
 SET s = REPLACE(s, 'î','i') ;
 SET s = REPLACE(s, 'ï','i') ;
 SET s = REPLACE(s, 'ñ','n') ;
 SET s = REPLACE(s, 'ò','o') ;
 SET s = REPLACE(s, 'ó','o') ;
 SET s = REPLACE(s, 'ô','o') ;
 SET s = REPLACE(s, 'õ','o') ;
 SET s = REPLACE(s, 'ö','o') ;
 SET s = REPLACE(s, 'ù','u') ;
 SET s = REPLACE(s, 'ú','u') ;
 SET s = REPLACE(s, 'û','u') ;
 SET s = REPLACE(s, 'ü','u') ;
 SET s = REPLACE(s, 'ý','y') ;

RETURN s;
END;
//
DELIMITER;

e mantive a redundancia da busca, caso o usuario tenha digitado acentos

Edição feita por: Stormbringer, 22/12/2010, 15:21.

[LeoB]

É... não deveria ser assim, mas por enquanto é a solução. Se funcionou no phpmyadmin, deveria funcionar no seu sistema. Mistério...