Welcome to Kodok Marton's homepage

Professional work from professionals!

  • Increase font size
  • Default font size
  • Decrease font size
Kodok Márton's homepage

Big data képzés a Sapientia EMTE Csíkszeredai Karán

Kedves Érdeklődők!

A Sapientia EMTE Csíkszeredai Karán a big data képzéssorozat második képzését 2017. november 23-án és 24-én tartja Kodok Márton (www.kodokmarton.eu), a marosvásárhelyi REEA cég programozója. A képzés minden érdeklődő számára ingyenes. Mivel képzésnek helyet adó 15-ös terem összesen48 férőhelyes, ezért túljelentkezés esetén előnyben részesülnek a Sapientia EMTE oktatói és hallgatói, majd azt követően a jelentkezési sorrendet vesszük figyelembe.


A program:
November 23-án 9-17 óra között egy órás ebédszünettel, 24-én pedig 9-től 16 óráig – ugyancsak egy órás ebédszünettel. Étkezni  – akárcsak az első képzés idején – a Csíkszeredai Kar étkezdéjében (is) lehet.

Alább olvashatják/olvashatjátok a képző által két napra tervezett tematikát. Megjelölte, mikor lesz aktivitás is: a LiveCodingot Ő végzi, a codelab-et együtt azokkal, akik akarják, és a Group Assignments csoportfoglalkozás lesz:

Part 1 - Ecosystem of BigData

  • become conversant with the terminology

  • thinking about how Big Data might be useful in their business or career

  • Bigdata adoption

  • three key sources of Big Data: people, organizations, and sensors.

  • skills for data scientists

  • the V’s of Big Data (volume, velocity, variety, veracity, valence, and value)

  • insights to real-world problems and questions

  • Internet of Things

  • tools and systems used by big data scientists and engineers

 

Part 2 - Ask the right questions about data

  • what are and what are not big data problems

  • identify when a big data problem needs data integration

  • data mining (LiveCoding)

  • frequent data operations required for various types of data

  • Regular Expression (CodeLab)

  • ETL / mapping / join

  • basic exploration of large, complex datasets

  • open-data, public data (LiveCoding)

  • discovering new data sources

  • Persistent vs Near-realtime vs real-time

  • JSON - semi-structured data

  • recognize different data elements

  • stationary vs streaming data

  • event-driven system (Group Assignments)

 

Part 3 - Data Model + Architectural Components

  • select a data model to suit the characteristics of your data

  • architectural components

  • Stack + open-source

  • Scalable big data analysis + autoscaling

  • traditional Database Management System

  • SQL vs NoSQL (Group Assignments)

  • Big Data Management System

  • Information System Design

  • Big Data Infrastructure Plan

  • Cloud + managed services

  • BigQuery (LiveCoding)

 

Part 4 - Algorithms

  • programming models

  • basic analyses of big data

  • text/sentiment/face/voice/movement

  • Recommendations + graph analytics (Group Assignments)

  • perform predictive modeling

  • machine learning models

  • stack components

 

Technical Keywords:
#json #RegularExpressions #SQL #NoSQL #Redis #ElasticSearch #BigQuery #Graphs


 

Kérjük tisztelettel, jelezzék/jelezzétek részvételi szándékotok legkésőbb november 15-ig a kosaistvan (at) cs.sapientia.ro e-mail címen.

Minden jót kívánunk!

Szervezők: Kósa István és Illyés László

 

Csökken az elektromos energia ára áprilistől


Átlagban 2,4 tized százalékkal csökken 2016. Április 1-től a villanyszámla értéke a háztartási fogyasztóknak, ez ugyanúgy vonatkozik az RDS Digi Energy és Electricára is.

Függetlenűl ettől a csökkenéstől, előző írásaink részletezik miként lehet kb 11 lejjel olcsóbban szerződtetni ugyanazt az energiát ha váltunk az Electricától az RDS Digi Energyhez, igen ezt is lehet idén. Mi már váltottunk. Hát ti?

Az Energiaszabályozó Hatóság március 30-én, a központosított szolgáltatásra kiírt versenytárgyalás nyomán jóváhagyta az április elseje és június 30-a közötti időszakra érvényes díjszabásokat. Az Agerpres hírügynökség emlékeztet: az elektromos energia ára januárban is csökkent, 3 és fél százalékkal.

Read more...
 

Kiszámoltuk mennyivel olcsóbb az RDS Digi Energy mint az Electrica. Váltottunk!

Hogyan lehetséges a váltás most 2016-ban vezeték és villanyóra csere nélkül és miként kell eljárni a villamos energia számlázás átíratásban az Electricától az RDS Digi Energyhez azt egy másik írásban részleteztük. A neten elérhető információk alapján mind megawattokban és illetékek nélkül található meg az infó. Konkrétan az RDS Digi Energy 165 lej / MWh valamint az Electricánál 179 lej / MWh áfa nélküli áron kínál villamos energiát a lakossági fogyasztok számára. Mi kiszámoltuk ezek alapján a teljes számlát, illetékestől, áfástól, kedvezményestől, tehát mindenestől. Kezdjük rögtön az elején és mutassuk mennyivel olcsóbb az RDS Digi Energynél ugyanazon a vezetéken ugyanazt a minőségű villamos energiát szerződtetni.

Read more...
 

Hagyjuk az Electricát és ezekkel a lépésekkel váltsunk RDS: Digi Energyre

Hogyan lehetséges ez most 2016-ban vezeték és villanyóra csere nélkül és miként számoltuk ki, hogy akár tizenegy lejjel olcsóbb egy körülbelül 80 kWh-os számla azt egy másik írásban részletezzük itt. Ezen kívül van még kedvezmény ha már van TV/Internet szolgáltatás vagy nyugdíjasok vagyunk. Számolásom szerint a 80 KWh-os Electricás számlánk 11 lejjel lesz kevesebb. Első évben 132 lejt spórolhatunk ugyanazon a szolgáltatáson.

Tiszta jó üzlet, ugyanazon a vezetéken ugyanazt a minőségű villamos energiát olcsóbban szerződtetni.

Read more...
 

Random newline and spaces inserted in emails

Troubleshooting

I isolated the process into three components: the email builder (my code), the mailer application, and the sending application (in this case, smtp through postfix). I followed the below process to troubleshoot:

Changed the mailer application to use the built in PHP mail() function, and I also tried sending using a completely different SMTP box. The problem was persistent no matter what process was used to send the mail.
I found the place in my code where the completed HTML was being handed off to the mailer application. Adding in a file_put_contents, I could then examine the exact data before it went to the mailer. Taking a look at it through a hex editor revealed that the body did not contain the offending characters Finally, I found another mailer application (I was using phpmailer). Swiftmailer is an alternative to phpmailer. I figured that if it was obscure bug with phpmailer, changing the mailing application would clear it up. This also did not solve the problem.
So if everything was working correctly, where could the problem crop up? The only place left to look was the encoding scheme for the emails. Scouring the internet, I found a few suggestions that the problem may be related to the message encoding. In this case, it appeared the problem stemmed from (possibly) a 75 character limit in quoted-printable encodings. This didn’t help me, as my emails were being sent using 8-bit encoding.

The solution

Just to see what happened, I changed the encoding settings on phpmailer to use base64 encoding using $mail->Encoding=”base64?. This solved my problem, though I don’t admit to knowing exactly why.

Note: don’t confuse this with character set issues. In the past I have seen situations where utf-8 text was being read into an email and sent as ISO-8859-1. When having weird characters showing up in your emails, this is most often the problem (or vice versa).

 

Speed up your beanstalkd developent by using saved job templates, supported by beanstalk-console (v1.4)

- ability to save jobs as templates/samples for later use
- manage saved templates
- add/edit/delete templates
- ability to reuse a template and kick to tubes
- added version checking to detect new releases

https://github.com/ptrofimov/beanstalk_console

 

Delete a bucket via streaming in RIAK added to riak-admin panel written in PHP (v0.5)

Several updates to admin panel for RIAK written in PHP.

- delete a bucket via streaming
- Enhanced listing and deleting keys via streaming, to avoid costly getKeys which can lock your Riak node
- riak-data-migrator supported delete, enhanced visual feedback for streaming delete
- Favorite based bucket listing, to avoid costly getBuckets of Riak, UI enhancements
- Composer and Vagrant support

https://github.com/pentium10/riak-admin

 

Pause tube, auto-refresh added to beanstalk console interface (v1.3.2)

  • pause tube for beanstalkd
  • Composer/Vagrant support
  • support to deactivate unserialize/json_decode/highlighter
  • edit Auto-refresh interval
  • edit tubePauseSeconds
  • added Settings modal

Check out on https://github.com/ptrofimov/beanstalk_console/releases and feedback is welcomed.

   
  • «
  •  Start 
  •  Prev 
  •  1 
  •  2 
  •  Next 
  •  End 
  • »


Page 1 of 2